我该怎么办

我前夫是个顶级的渣男又赌又嫖，一直希望他能改变结果赌账越欠越多，不得已还是选择离婚了，有一个儿子14岁判给他的，离婚后他到深圳打工，娃子在他姐姐家上初中住校每个周末回她姐姐家，他说一个月给他姐姐一千块的生活费，结果一年到头不但没给人家钱反而人家为娃子一年花了大几千，这次过年回来听他姐说没钱用又问她借了一千五用，今年她姐姐不让娃子到她家了，说负担不起，让娃子住回原来自己家里，让他奶奶每个周末从农村老家来这里给娃子做顿饭，而他爹妈看他不成器也不想下来在农村喂猪种地挣钱，他经常换手机号码这次过年换了也没给娃子说，我通过微信联系他让他担起他的责任，别让娃子受罪才要到他的号码的，可是娃子一个人住我好操心一个星期回来要换衣服，吃饭也操心，之前离婚的时候我就说房子给娃子，他一个月给娃子一千生活费我带娃子他不干，说房子他要一半娃子一半，我是在超市上班只够挣个生活费，而他还会个技术在外打工一个月能拿一万左右，离婚时亲戚都说男孩子以后用钱的地方多怕跟着我会负担不起，加上我说房子给娃子他又不干，结果我就净身出户了，后来经过别人介绍我又成家了，现在的老公对我挺好的也很顾家，就是条件一般，老公前面也有一个儿子每个月要给一千五的生活费，他是开半挂车的也很辛苦，我也怀了宝宝，现在他挣钱基本上也就是够一家人生活，我真心想跟他好好过，不想为以前的事儿烦，但是由于前夫的不负责任导致大儿子现在这样的生活处境我很担心，我到底该咋办？