该不该放弃

我跟了他四年了，一直以来我都认为他是对我好的不听家人的话非要同他一起，以前他要冲话费叫我帮他冲我二话不说就帮他冲了，去年买房没钱我也给了他两万结果也没写我名说没有结婚证，我说你干嘛不同我说我不回去办是我的问题，后来听他解释我原谅他了，他说他他妈借了两千我身上也没多少就拿了一千叫他给他妈，我说70多岁人没多少钱的可怜，后来他借他外甥女两千我们发工资就给还了，他今年朋友借了一千还回来我叫他自己放身边，回家交房贷说没钱我打两千给他，上次叫他帮我冲下话费他说叫我自己用支付宝我们大吵了一架，前几天他的朋友叫他回去复婚说他前妻多好，我偷看微信知道的，今天我又叫他给我冲下话费，他又把我说了叫我用自己支付宝，我说你微信红包有钱的，我交个50块钱还要从银行卡里取，他说他每次都帮我冲话费，我说了他每次都是我帮你冲的就就两次开口你就不愿意了，后来我说不冲算了可能他冷静下来说帮我冲，他说冲不了都是500，一千怎么冲，我说拿过来我说这里不是50吗？我说冲100好了他说我话费那么多，要输密码的时候我问他密码多少他不说叫我把手机给他，我心都凉了我说你没把我当你家人，他说我也不知道你密码多少，我们没结婚我却做着夫妻该做的，结果这样，是不是我们不是夫妻他才这样防着我的，可我都同他买房了，是不是他后悔了想前妻了，我以前都没想法的，他叫我拿三千给他凑齐5千还他妹妹我没给，我叫他冲个话费都这样，只要我对他一下不好他也还回来这样的男人该怎么做