我要怎么处理

我和我老公是在相亲认识的，还是老同学，都在考驾照有点感觉。当时是说男方来我家并且他父母说买一辆车给我们。认识2个月在一起，5个月怀孕了，订婚也是两家拿钱买三金。 怀孕期间我老公一直在家里做事，我待在我家那边的学校上课到临产。说我老公做事其实是三天打鱼两天晒网，经常开车到我学校玩，生孩子还是他爸妈拿的钱还有我家给的钱都给他了交钱。现在小孩5个多月了还是没有一份工作还向家里要钱，小孩也基本是我家在抚养，我看不下去了赌气去广东一个礼拜让他自己带小孩看有多辛苦要不要努力赚钱。谁知道在我去广东的时间他竟然借高利贷潇洒小孩丢给他妈带，他还在外面开房出轨，被我手机上查出来了，之后我家打电话需要两边的亲戚做在一起开个会解决这个问题。亲戚都希望看在孩子的面上原谅他一次，给半年时间看他改不改有没有成就。但是我态度坚决 他不带孩子不工作有时买孩子的用品都买不起没钱，竟借高利贷出去鬼混，快30岁了成就已经看出来了我不想浪费时间，叫他放手，各找各的幸福，小孩他要就把户口签给他。 这次两家协商后他家觉得我没有给他面子，说人都会犯错只要会改就行，看我态度这么坚决不肯给机会索性不管了，随便怎么处理，反正我和孩子都在我家。我老公也是这个态度，反正就是不管我和小孩，他还说自己去广东打工。我该怎么办呢，已经过去一个多礼拜了小孩吃喝拉撒他和他家的人都不管，我要怎么离婚，孩子怎么办，我和我妈带小孩带疯了也愁啊