新我该怎么办？我错了吗？

今晚和他吵架了，原因是他妹夫找他借500元。我们今年刚刚买了台挖机，身上所有的积蓄都没有了，还借了很多钱，现在身上就只有2300元，这是我跟他全部的家当，还是挪用女儿的压岁钱。挖机基本四天就要加一次油，一加就是一千多，还有两个孩子说不定也要花钱，我让他量力而行，直接跟他妹夫说下，我们现在也很困难，他认为几百元也不借，他不好意思，面子过不去，我说他，他不听，我就生闷气，然后他就扯出我管他的事情（今晚他有事，晚点回家了，但是没有跟我打招呼，他说忘记了，我就说了他几句，我之前跟他说过晚上不能按时回来，就打声招呼，我就知道他有事。）然后让我以后别管他，我很生气跟他说，以前我上班时晚回来，他是怎么说我的，为什么到他身上就做不到，我就把奶瓶很重的放在桌子上面，他就把他的手机往地上砸，我捡起手机又砸了一次，他就过来对我打了好几下，我还手了，后来我离家出走了，出去后发现我哪也去不了，我没有朋友，没有亲戚。只能在马路上走，后来我家婆跟我说儿子哭了，问我忍心吗？我儿子才四个月，我实在不忍心，我在外面呆了一下就回家了，回家发现他已经睡着了，我现在很想跟他离婚，但是孩子怎么办呢。女儿才四岁，儿子才四个月，我不忍心，但又不想过了。我现在很迷茫