新家的烦恼

我结婚11年，孩子三个。我和老公是亲戚相亲介绍的、属于闪婚。结婚11年都在外做生意，我在老家。每年回家过年，年十六就走。每年就回家一次。我生小孩也不回家看看，说忙但钱又没有汇回家多少。我跟公公婆婆一起住。开始住都让来让去很好说话。进几年我没有工作就说闲话。我小孩还小最小才3岁多。现在老公生意不起色说要钱，家里都被他借光了没人肯借了（500多万）。他们主意打到我身上。要我去贷款20多万。我不答应就吵，我心情烦死了。他在外没有理过我们母子几个学费都是公公婆婆去借的。我没有偿还能力不答应，有错吗