我要求离婚的话是否一定要去安徽的法院起诉

我和丈夫是2006年结婚，他是安徽省滁洲市人，我是湖南岳阳人。我们于今年7月生下一男孩。结婚后我户口没有转到我丈夫那，结婚证是在安徽领的。婚后我和丈夫就开店做生意，后来关闭了，之后我去安徽当地上班，我丈夫一直在家，而且他迷上了算命。之后，在去年10月我怀孕了，就没有去工作了，在快生产时，我们之间出现了矛盾。主要是关于孩子在哪出生。他要求在安徽出生，因为他给孩子算了个日子，说那天生好；而我父母出于对我担心和照顾考虑，要求我回湖南生产。就因此我和他甚至是两方家人闹了矛盾和误会。怎么解释他和他家人就是不理解硬是顽固认为自己想法。后来孩子还是在湖南出生的。可是出生到现在6个月了，我丈夫只和儿子待一个月，并且之后就不闻不问，也不养孩子。因为他仍然对我在湖南生产怀恨，而且之后我于今年9月底跟他回了安徽，后来我们发生吵闹，主要是由于他还是不去工作，整天喝酒算命，我要去工作他还生气，并出手打我，并打算把我反锁家里叫他母亲看着我和孩子，防止我带孩子走。后来我趁他不注意把孩子带回湖南于10月底。之后他电话也没有。什么都不管，现在小孩生病住院他也不管。