关于我丈夫的孩子问题

我有一个问题困扰了我好久了,我的丈夫三年前和他前妻离婚,有个五岁的儿子,我身边所有见过那个小孩的人都告诉我他一点也不像我老公,我家人也一直让我们带着孩子去做亲子鉴定.现在我担心的是孩子已经懂事,如果我们带他去做了鉴定,他和他母亲是否有权利来起诉我们侵犯了他的隐私权或其他什么权利.我该怎么办?