不想跟他结婚

他大我十岁，创业（生意不好），去年我养了他半年，在我工作不顺心不想工作时，他的回答不是让我休息，而是说我们吃什么？交往快三年了，没花过他的钱（我给他买过好几套衣服，他就是陪我过了两生日各给了520块钱微信红包），有时吵架，半夜我出去他也不会出去找我，他家庭条件不好，他的家人我也不喜欢，我不想跟他结婚，今年春节期间在他的再三要求下，来了他老家住了一个星期（他妈逢人就说，我跟他五一结婚，what?我完全不知道，为了所谓的给面子，我当时随便附和了下），我觉得他这把年纪了，可能真的不是非我不可，而是没得选择，但我真的不想跟他结婚，真心不想，但又怕他会成为街坊邻居的笑话，好烦躁，我该怎么办？我也不敢跟家里人说，家里人肯定会不答应的，当然，主要是我不想跟他结婚，我害怕跟他过日子……今年我26岁了，谈了快三年……