异地离婚该如何进行

我与丈夫与02年2月份结婚，婚后生有一子，由于我是四川眉山人，而他是安徽人，故婚姻生活有太多矛盾无法调和，吵闹成了家常便饭。关键是2006年12月17日他因为私事伙同朋友将一名上海籍老人殴打致伤，后被上海松江人民法院以故意伤害罪判处有期徒刑14个月，期间我一边上班一边照顾孩子。由于工作关系无法抽身照顾孩子，07年春节后将孩子送往安徽奶奶家寄养，期间学费保险费都由我个人支出，08年3月我丈夫刑满出来后我当即提出离婚，但他坚决不离，还无赖的提出要我给他一大笔分手费，我当然不同意。之后他一直骚扰我，迫于压力我只能无奈的离开了我工作4年的单位，生殖离开上海返回四春老家，到现在也没有工作，于是离婚的事也一直拖到现在。现在我本人已经忍无可忍，强烈要求诉讼离婚，碍于我们当初是在安徽当地登记结婚，而今我又无法再回到登记地法院起诉离婚，他人还在上海无正式居住地，但经常会往返安徽老家，鉴于此种情况我不知该如何处理。