遇无赖丈夫,欲离难离,该怎么办?

我的父亲是一个十足的无赖,从小我和母亲便忍受着他的暴力,由于那个时候我还小,母亲为了我便忍受了下来,可是现在我已经成人了,我希望母亲以后能远离这个无赖.但是我的母亲担心离婚后,那个无赖会去骚扰母亲的家人(以前曾发生过类似的事情).所以一拖再拖,直到现在仍无结果,我希望各位能伸出援助之手帮帮我和我苦命的母亲.我们要怎么样才能摆脱这个魔鬼?