我的父亲能够剥夺我的居住权吗

我的父母结婚之后没有房子，一直与我爷爷奶奶同住。我们家的房是军队的，我爷爷奶奶折合军龄低价买的。 我们家里是双胞胎，我有一个孪生哥哥。父母在我们上初中的时候离婚了，父亲患有精神分裂症。离婚的时候，哥哥判给了父亲这边，我判给了母亲。由于我的母亲没有房，所以当时我先在父亲这里寄居，直到18周岁成人。初中毕业的时候，我的爷爷去世了。 如今我早已长大成人，现在在这个家里的成员是：我、我父亲、我哥哥和我奶奶。我的户口一直在这个家里。 父亲的病情不大稳定，动辄找茬乱发脾气，昨天又因为一点小事要把我赶出这个家，虽然我已工作，但由于各种主客观原因目前还无法在经济上实现完全独立，也没有承担独自在外租房的经济实力，而我的父亲给我的期限是一个星期之内搬出这个家。实在没有办法了，我想用法律手段保护自己的利益，我知道房子是属于我爷爷奶奶的，所以最终的决定权还在我奶奶那里，但是，我的父亲有没有全力把我赶出去呢？而且他是个精神病患者，他有没有自己的发言权呢？请求各位版主律师和大家的帮助。 orz