孩子跟谁姓有所谓吗？

我老公是上门女婿，我家大宝儿子就跟我姓了，其实只是家里老人要名声，我们年轻人都无所谓了，跟谁姓都是自己的孩子，现在怀了二宝问题来了，本来说二宝跟老公姓，老公自己考虑的比较周全，说如果是儿子还跟我姓，免得以后两个孩子长大因为姓不一样，后辈也就亲不起来，如果是女儿的话就跟老公姓，这样女儿长大出嫁有了孩子随夫家姓，也没那么多麻烦事。可是最近老公公不断的要求不管生男生女都得跟老公姓，搞得老公也好为难，我自己倒是无所谓，我们家人也说没什么，就是考虑到假如是男孩，以后会不会在生活中给孩子带来一些没必要的麻烦呢，就像老公之前考虑到的后辈问题，好纠结，老公还怕如果老二跟他姓了，我爸妈，还有我的姐妹会对这个孩子另眼相看，因为一直在我们这边生活(爸妈在农村，我们在城里，离的很近)，这个谁也无法预测，到底该不该跟老公姓，我也不想为了孩子的姓有什么矛盾，大家给点意见