有没有在合法的情况不在赡养这个父亲

我们的父亲是一个地道的赌徒，还很爱婊妓，从小我们的生活多是靠我妈妈去转来的，我们的妈妈是一个文盲什么多不懂的就知道辛苦的工作，在我们只有8到9岁的时候，我们的父亲就跟一个女人走了没有音讯二到三年，什么多没留下房子多好早卖光了，我们一直妈妈住在外婆家三年，后来父亲又身无分文的冒了出来，妈妈收留了他，还在亲戚的帮住下买了一个老房子，没过多久他又开始了赌，输了就来回来跟我妈妈要钱，没有就让妈妈去外面借，不给的话就又打又骂，到我和姐姐小学毕业的时候家里以经切别人好多钱了，全家在外打工到我们18岁才还清了所有的钱，还留了一点回到家，没过多久又输光了，又在外借了好多，我们上班得的钱从来没有我们的份，我们的嫁装多被他拿去输光了，到我们22岁的时候妈妈给了父亲5000块让他跟妈妈离婚，老房子一人一半，婚是离了可是住在一个房子里他一输钱又来问妈妈或是我们要钱，现在我们以经多30岁了，妈妈和父亲也多54岁了家里还是切下好多钱，