老公总是喜欢在外面玩，有时候还夜不归宿怎么办？

我老公一直都是喜欢在外面玩的性格，去年年底我刚刚生了我家小宝贝，因为没什么奶，所以孩子四十多天我就在家附近的幼儿园工作了。最近老公总是夜不归宿，家里都两个孩子了，感觉他一点都不顾家。他朋友的老婆以前总是说我不怎么管他，我现在开始就管他严一点，晚上他不在家就给他打电话，他总是说在外面有事让我放心，最近有时候还夜不归宿，我问他是不是有外遇了，他说我吃多了。只要他不回家呀我就爱乱想，针对这种情况，我该怎么办？