两个不同家庭得人，能走到一起吗

一个同事的朋友给我介绍了一个男孩。介绍人也是个有体面工作的长辈。把男孩和男孩家夸上了天。但是，后来我跟男孩交流，才发现根本不是这样。甚至让我感觉到他爸是普通小生意人都爱做的，就是到处拿钱去跟这些体面人搞关系套近乎。
我的老家是个县级市，男孩和我来自一个市，只不过他家在下面的乡镇农村，我家在县城住市区里。但是，我们两个都不在那座城市工作，我在地级市工作，他在省里的部队工作。我现在比较纠结的就是他家除了他和他爸，其他人都太一般了，不是我们所谓的体面人家，跟我家情况差得比较多。我不知道该不该继续交往了解下去。下面就分别介绍他及他家人的情况。还有我这边的情况。
一、男孩：他的自身条件还不错，身高一米七三左右，样貌还行，本科军校学历，现在在部队工作。
二、男孩的父亲：长期在外面做生意的，书读得不多，生意不知道做得如何，只知道有自己做业务也有帮朋友做，属于自己也在帮别人打工，也干点私活的那种。
三、男孩的母亲：农村妇女，可以算是没文化的，小学都没毕业。每次男孩父亲回家，两人意见不和有矛盾就会吵架。毕竟她没出去见过世面。
四、男孩的姐姐：从小不好好学习，高考都没去参加，而后自己去打工折腾了一圈回来嫁给另一个乡镇的男人。生了两个孩子，目前在家带孩子。
五、男孩的姐夫：之前开厂子，厂子出了点状况，现在也在跟男孩的爸爸一起做生意。
六、男孩爸爸的兄弟：男孩的大伯之前给领导开过车的司机，现在没开了。男孩的叔叔小时候出生有点问题，脑子有点呆。大伯和叔叔都在农村娶妻生子了。
男孩他们家是农村那种自己盖的房子，他爸爸三兄弟联排建在一起，平时他爷爷奶奶住老三家，毕竟他叔叔脑子有点呆。

我家这边，爸妈都是从小在城里长大的，受过高等教育，各有一份体面的工作，而且都各自取得一些成就。我的爷爷、外公、外婆也都是受过教育的，都是从单位退休的。我爸妈各自原生家庭的兄弟姐妹也全都是有体面工作的人，都读过大学。所以我现在很犹豫、很纠结，我不知道我和男孩是不是要继续，因为我考虑到双方家庭有别。昨天又有朋友跟我强调基因很重要，我就很惆怅。还有就是他在部队工作，我们现在谈着都是聚少离多，他自己也说结婚后他比较不容易照顾到家里。毕竟部队比较特殊。我们现在虽然都在一个省，但是不在一座城市，属于异地恋的。
希望大家给我点建议，帮帮我。我现在真的不知道该怎么办。别人之前给我介绍的我都不喜欢他们的外貌，这次这个还算可以，所以我没有拒绝交往。但是却又这些因素。等候各位的回复，谢谢！