男闺蜜的爱我该怎么办

我们都是己婚了的。他跟他老婆是相亲的那个时候年纪小在一起怀孕没办法结的婚。一直都知道他不爱他老婆。从没想过他会喜欢我 我跟我老公是自己谈的 觉得老公对我没以前好了 不知道是不是生完孩子对我没感觉了 一个月才一次小孩都一岁多了。男闺蜜对我就好像我跟老公那个时候的爱。我也跟他说我们不可能的但是他说控制不住想我。我该怎么做才能又不伤害他又能让他断了这种想法