婚后哺乳期多次想离婚

自从结婚后他就没有上过班，我婚后怀孕坚持上班，他呢就借着我上班路上的安全为由，每天接送我上班，直到现在宝宝两个多月了依然在家，男方家里有点小生意，所以他就心想着还有他爸妈呢的这种想法，但是他有他爸妈，那我们宝贝呢？要靠着爷爷奶奶？？？？宝宝一哭闹赶紧把自己屋的门关上，给孩子洗几个尿布还叨叨一天多累！他这样的状态让我心里一点依靠都没有，没有责任感？每天看着他游手好闲不自强的样子，我就生闷气，一生气奶水就不好，两个多月的宝宝，好几次想搬回娘家，省的看着他心烦