新老公家里让我有太大的压力不知道是我错了还是他们不对

我和老公自由恋爱，双方父母都反对在一起，老公单亲家庭长大，我们都是独生子女，婚后我们挺幸福的，有一个宝贝女儿，我是一个不爱表达自己的人，公公经常说他们家里人都对我有意见，都对我印象不好，其实自从我嫁过去也听邻居们说过不少他家的事，祖辈传承能打人骂人，所以我的婆婆选择了离婚。我听公公说亲戚都对我有意见，所以每次他们来我们小家的时候我都特别反感，而且他们家亲戚还总来我们家，他的爷爷一到我们家就说孙子家就是他的家，而且各种夸他孙子的好！我在他们家里我不管闲事，和我说家事我就听着，老公不说我也不去问，因为他们所有的亲戚都好说闲话，所以我选择回避，不爱说话，和他们在一起也高兴不起来，总是觉得压力太大了！老公的姥姥家人却很亲切，我很喜欢他们！公公总是说我不善良，对待他们不友好，老公也觉得我对他们家人不冷不热的，总是和我吵，骂，我好累，不知道是我太过分，还是他们不对，大家帮我出出主意