遇到这样是事该怎么办

末次月经8月5号来的，去医院医生说宝宝小了一周，原本因为怀孕了去年没准备回家过年的，可公婆说他们要回老家，宝爸就说他们来了4年了，说两兄弟送他们回去他们心里要高兴点，我怀着孕也没说什么就同意了，想想虽然要做30个小时的车，但是自己开车开慢点，自己在小心点，可在路上没事，回到家宝爸却天天不在家，没天晚上都2-3点才回家，有时候甚至2-3天不回家也不打电话给我说一下，就算回来了也没有什么解释的，问他他就说他几年才回来一次出去玩这样做他是没错的，（我们虽然结婚10年了可一直没在他老家呆过，他老家里的人我都不认识，怎他都是一个省的但是一个东一个西开车都要开8-9个小时）我气不过正月初四就回娘家了，叫他他不跟我回，娘家妈妈初六过生日，加上他那样对我，我就自己走了，可我走了之后他就说他好不容易回家过回年，说我这样就走了让他在他亲人面前丢脸了，都不去我娘家接我，最后去了说是我妈打电话逼他去的，把我接到上班的地方就跟我说等孩子生了就个我离婚，我心里难过就忍不住留眼泪他看到我这样哭，就说我你天天这样那小孩也不要生了，生下来有可能也是个傻子，我也想了想，可我始终没有不要宝宝的勇气，现在我选择不管怎样都要把宝宝生下来，他说我这样选择是拿他做替罪羊的，宝宝生下来有任何问题他都不管，我现在该怎么办