新我爸要我第三胎跟我姓，我和老公都不同意，怎样回绝？

如题，我爸家里独子，但是他只生了我一个（女儿），我现在怀孕第三胎了，他竟然跟我老公提出要把这第三个孩子随我姓。
虽然对于他的要求我能理解。但是我内心里是不赞成的，我老公也说如果第三个孩子跟我姓宁愿不生。费事将来看着不舒服，彼此心里有条刺。

你们说我该如何回绝我爸？