两兄弟婚后住一起好吗

心里很矛盾，不知这件事发生在别人身上是怎么处理的 我老公家兄弟两个，我老公是哥哥，婚前我父母和公婆拿了部分钱，我们自己出了一点买了套房子，付了首付，两年前他弟来这边工作了，房子没下来，我们就租的房子，他弟也一年拿了一万给我们作为他的生活费和房租，去年我们借了一点钱总算把房子装修好了，宝宝也出生了，压力也很大，生活费和房贷，还有外债，宝宝开销，基本每月都负债，更别说存钱，他弟弟去年也就给了两千生活费，平时也不爱做家务，当然他是老公亲弟就算不拿钱也没关系，但是从过年到现在我心情都很郁闷，他弟订婚了，现在和未婚妻一起住在我家，我不同意，我和我老公大吵一架，这一个月来每每说起这事我们夫妻都会不愉快，老公觉得我小气，公婆也对我意见很大，我觉得我们自己生活压力也很大，并且两家人住一起觉得也很不方便，老公觉得我这样可能会破坏家人的感情，我很矛盾，也不是不体谅他，但是我不是不讲理的人我也愿意侍奉公婆，我觉得各自成家就不应该住一起并且时间长了各种矛盾会很多，跟老公沟通也一会闹得不愉快，不知道怎么才能让大家都开心