正在办理离婚，内心很憋屈

相亲认识，为了结婚我家卖了一套房，两家共同付了首付买房，我家出的钱略多。他家一直说没钱，所以结婚对他家没有任何要求，也没要彩礼等。无论是学历，外貌还是家庭条件我都比他好，我家只希望他对我好就行。怀孕后，他家就提出问我们借钱十几万(我们当时只有这么多钱是买房剩下的)。后来带宝宝要我们给每个月3000元，然后奶粉玩具吃的也是我们付钱。他们自己做生意有收入不缺钱的。但他儿子工资比我高一点，可能他们想用一点吧。
他家的观念就是儿子结婚了，就要占儿子的光了，儿子应该养他们。之前闹过家庭矛盾，他打了我，后面我妈找他谈，和好后，他说关于打你这件事我不会认错道歉，因为你骂人了。他喜欢冷战，从不低头，非常强硬，绝大部分都是我先找他谈和好。比如他不喜欢我穿短裙，我有次穿了出门被他发现，他就不理我了。有时候可以冷战一个多月。
他不能平等的对待双方父母，出去旅游只给他父母买东西，并且和我说，现在你家没带宝宝，不能买东西，带宝宝辛苦所以要给我父母买东西。回老家要偷偷摸摸去看我奶奶，因为他爸妈会生气。之前两个妈妈有矛盾，所以他不会去我家过夜。但是宝宝在他家带，我必须去男方家过夜。
我后来不太敢和他争执，担心他和我冷战，比较焦虑。有一次回老家，我想第三天晚上回自己家过夜，他不让我去，发生了争执。然后他就说我不顾全大局，就偷偷把工资卡换了。我俩的工资加起来要还房贷，给他父母3000元，还有其他开销，后来就没什么钱了。日子过不下去了，他父母觉得他工资高，我不敢离婚，他妈总是谁谁谁离婚了很可怜。我确实也不敢离婚。(我家带宝宝时间比他家少，他家霸者宝宝，说宝宝不适应，必须要他家带。)
他很妈宝，天天和他妈打电话，他妈给他发短信总说我不好，说我不会做家务。他觉得我应该和他一起哄着他爸妈高兴，他爸妈一高兴，也就维系了我们的婚姻了。
上个月我终于下定决心离婚，他家可能觉得我吓唬他们，他一口答应。后来他拖着，我准备起诉了。
我觉得一般离婚是因为出轨等恶性事件。我们不冷战时觉得他对我还行，逢年过节给我买礼物，也会分担小部分家务，对儿子也是真的关心。可是这样的日子真过不下去了，难道只有出轨才离婚吗？求助[疑问]