这个婚姻该不该继续下去？

和老公认识到结婚两年多了，因为我家是两个女儿，姐姐嫁人了，所以他是上门女婿，没结婚的时候我们在一起，他从来都没有给我买过什么的，结婚的时候买衣服他都舍不得给我买，也舍不得给我花钱，，很多事我都忍了，婚后，他在我们家一天嫌这嫌那的，说我家什么东西都是破东西了，家里的活他也不干，每天早上睡觉睡到十点多，起床后就坐那玩手机或者电脑，我妈把饭做好，他还嫌弃不好吃的乱弄。现在我怀孕了，离预产期就剩20多天了，怀孕期间都是我妈妈在照顾我，现在他却说孩子以后要和他姓，我家人要是不同意，他就回他家那边去，以后也不来这边了，我该怎么办法这个婚姻，该不该继续下去？