和这样男人要不要一起过下去

我跟我老公感情一直很好，我老公是做建筑的小老板，在15年的时候，他赌博输掉了所有的钱，工人发了一些欠了一些，欠了一屁股账，从哪年开始，我们日子不好过，几乎吃饭钱都没有，靠借钱过日子，我对他每天除了责骂就是抱怨，这样日子一直持续着，今年六月份，我们分开了，他去别的地方包工程，日子慢慢好过了起来，车也买了，就在十一月份，我老公接我去他工地，晚上失眠我就拿他手机微信，发现有房间号，我假装我老公跟那个女的聊了起来，骗到开房证据，和我老公对质，但他死活不承认，威逼之下，他只承认聊天，说他嘴贱，就是聊了几句，以后再也不会了，还当着我面骂那女的***之内，为了证明自己直接发视频给那个女的，让那女的当面说清楚，那女的接通后还没说几句就把我老公拉黑了，第二天我就会家了，之后我老公给我视屏和电话多了起来，我们话也多了，他过十天左右，有来接我了，这次在一起十天左右，我没有在他微信里看到那个女的，我们也没有在吵架，好景不长，前几天我们有开始吵架了，他老是推开我，不让我去他那么，说过几天接我，一直拖着，开始嫌弃我了，我们有没有了话题，今晚又在他以前手机里发现之前和别的女人聊天截屏好几个人，我都不知道怎么和他相处了，没有接受，怎么办啊