怀孕了，不让公婆伺候就必须离婚吗？

我和老公是大学同学，毕业后就留在上学的城市，买了房子。我和老公的父母都不在同一个城市。结婚后，公婆常常过来同住，一开始我不太能接受，毕竟四个人生活和两个人生活还是差别挺大的，大家生活习惯什么的就不说了，公婆长期住这，我家人偶尔来看我也不方便去家里休息。但是想着老人也是好心来帮忙做做饭什么的，出于家庭和谐的原因，我就让步了。 后来老公一直建议买一个大点的房子，以前的房子虽说是三室但是有一间很小只能当书房。想以后有宝宝了怕住的太挤。一开始我担心房贷压力太大就没有同意，后来老公一直劝我，还说我家人来一直没有地方住，再买一个大点的房子让我公婆住我们现在的房子，我家人来了也有地方住了。后来终于想通了又买了个大三室. 现在刚刚搬过来一个月，我怀孕了，老公说他爸妈想来照顾我，还说想把我们以前的房子租出去好补贴家用。但是他们来照顾我的话我家人又不方便过来了，那我当初买这个新房有什么用呢？我在犹豫着，前几天早上老公跟我说他爸妈已经来了，当时我特别焦虑，感觉自己又一次陷入被动，老公当时担心我太难过对怀孕不好，我跟他爸妈说我家人在这住着，让他们去以前的房子住了，老公也跟他们一起去那住了。 当时感觉自己特别无助，我们都是和家人不在一个城市，我只是想我的家人来可以有个歇脚的地方，想有一个属于我们小家庭的家，把以前的房子给他父母住，这样都不行。老公一直说他们早就准备好了要伺候孕妇，想赶快抱孙子，说我这样拒绝他们太残忍了，但是我家人也想常常来看望自己怀孕的女儿啊！我为我的家人考虑一次就错了吗？ 这几天老公一直在问我什么时候让他父母过来，如果不让他们来他也不会再回来了。 我一个人，确实是挺辛苦的，家里还有狗狗要遛，这两天自己特别不容易。但是就这样又一次妥协了吗？ 是我错了吗？