说一个一直不想说不想面对的话题

我今年22岁,17岁认识老公 是网友。 第一次见面我觉得他个子矮，又土。她觉得我胖。互相看不上。就没怎么联系了，后来我交了男朋友。没多久就分了。 19岁的时候我们又聊上了，20岁我们结婚了。老公比我大四岁。 他一直嫌弃我以前交过男朋友，不是处女，而我跟他在一起的时候跟他说了，他说了不介意。后来我觉得不是这么回事，他介意，很介意。 没结婚的时候我想既然介意就分手，他又不肯。结婚了也不领证，直到我怀孕三个月后才领的证，(结婚半年多才怀孕)。 现在小孩也生了，有时候他觉得自己亏，说娶回来就不是女孩子是嫂子。我们一直在避开这个话题，我怕以后我们感情有矛盾，根源一直在这。姐妹们，怎么处理我该