不知道该不该离婚娶这个女孩

我和对象结婚七八年了，一个男孩一个女孩，大的7岁，小的5岁，从结婚到现在没有感情，我俩都是为结婚而结婚，一直生活到现在，平时交流也很少，但都是为了孩子两个人不怎么吵架，也就只有亲情了，有时候好几天不联系，有时候几天联系一次，彼此都这样。在我结婚的第三年，遇见一个比我小5岁的女孩，我俩一直谈了五年多，她也知道我结婚了，刚开始不在乎，我俩感情很深，后来慢慢的因为我和对象的原因我俩吵过500次左右的架，但每一次都没分手，每一次都过来了，最近一年，我感觉她不爱我了，生活中没有任何关心和问候，也不主动联系，我联系她，她就回复，不联系不回复，但是她也没提分手，我俩现在这个状态很不好，我想娶她，可是我放不下两个孩子，我不知道该怎么办了……，请专家帮忙分析