我不想离婚一直没同意，后来他对我的态度什么的我知道他回不来了，我想起诉离婚

我想咨询一下，老公2021年2月3日提出离婚，给我的理由是老吵架，不想过了，说把按揭的房子给我，孩子给他，债务给他，就搬出去了，我不想离婚一直没同意，他之后说要回来迟迟也没有行动，后来我在车上安了定位器，发现他出去旅游三四天，回来时我找人去确定是不是跟女人在一起，是的，我确定了他是有不正当男女关系，但想挽回他并没有拍照，后来他对我的态度什么的我知道他回不来了，我说按约定的我要孩子你支付抚养费我们离婚吧，他要求一人一半，正常分割，我说协议离婚就按之前约定，他说就一人一半要不就拖着不离，我说不离也行你回家吧，他说不回，就离婚，我去找律师想让律师帮我出一份离婚协议然后我最后找他谈一次不成的话我想起诉离婚，律师说她建议他们代表我去谈，说我谈也谈不明白要不早都谈成功了，说他们谈不了的话再起诉，我同意了，就支付了4000元调解费一次，签了合同。我现在感觉有些不靠谱，因为我一直说我手里没有证据