我们双方口头达成协议说小孩归谁抚养房子和门面就归谁

丈夫因吸毒，我与他在8年前就离婚了。当时我们是协议离的婚，离婚时，我们双方口头达成协议说小孩归谁抚养房子和门面就归谁。后来他抚养小孩，我什么都没要就走了。因为他一直没有戒掉毒瘾，所以跟本没能力抚养小孩，一直是爷爷奶奶带着。由于爷爷奶奶年纪越来越大，抚养小孩也越来越困难，这么多年来说是说他带小孩，其实多半时间小孩还是在我这里。在我这里带他从没给我一分钱的抚养费。去年他又因吸毒被判了三年刑，小孩的奶奶又得了老年痴呆不能自理，爷爷年纪又大了，小孩没人照顾了。小孩的爸爸在前几年还跟另一个女人打了结婚证。我现在想把小孩带在身边。但我没有房子，我想现在把房子要过来把房产证上改成小孩的名字，你说可以吗？