新我到底是不是太自私了

今天下午和姐姐吵架我是离异再婚了，姐姐也是。但是姐姐把一双儿女抚养长大了，一个上高中一个上初中，而我离婚前夫出轨离了婚生了儿子，我离婚没要孩子现在姑娘12了在她奶奶那抚养上学。我现在这个孩子还有一个月要生了，我离婚没要孩子是我自己为了自己幸福太自私了吗。我是不是不应该再婚，姑娘寒假这次来开学回去第二天就给我打电话说想妈妈我现在的老公30比我小三岁没结婚过也没有孩子，现在在哈尔滨买了房子贷款就二十多万，我在想把我姑娘上初中接来但是他爷爷奶奶说拿抚养费我恨他爸如果我把姑娘接来他自己又有了一个儿子不会给我拿一分钱，我该怎么做，大姑娘是我十月怀胎生下来的这个也是，我得怎么做哎