如爸爸百年归老，外面的女人和他生的儿女有没权来争已公证的楼房

我家一共有7口人,爸爸、妈妈三个姐姐一个弟弟和我。在2004年二姐发觉爸爸外面有另外一个女人，已生育一对儿女。（经爸爸朋友证实）但我们质问爸爸时他说你们有什么证据，证明他外面有女人。后来爸爸还是和弟弟一起去公证了他现有的房屋给弟弟（两幢楼一幢三层85年建，一幢2000年建）后来2005年，弟弟在爸爸的人事关系下再买入一块地（已建5层，此楼爸爸没出一分钱建）楼房是弟弟的名字。