新回家与否？

我结婚三年了，再婆家待的不到一年，其他时间都在我妈这，因为老公经常不在家，我跟婆婆也不对付，因为生大宝的时候我们闹过不愉快，我们也不怎么说话！我也不想回去！今年生了二宝老公不想我去我妈那，我愿跟他在外漂泊，也不想回婆家，老公一年在家待不了几天！我该回去还是？