新和老人一起住，孩子不找妈妈只找爷爷

孩子现在两岁5个月了，我们和公公婆婆一起住，平时我们上班后都是爷爷奶奶带孩子，下班后我们自己也带但是孩子还是只要爷爷，特别伤心自己生的也不给我亲。我也特意想要多陪陪他，不要求他。但是他一闹我就火大，可是小孩子从小都没有对错的区分，还能指望长大后补救吗？