新我老公算不算精神出轨？我该不该原谅他？

上几天又偷看他的手机发现他的红包记录去年情人节给他前女友发了红包还是52.0当时看到心里好难受！最后我找他理论！问他是谁先他还不承认，说记不清楚了！我说那么重要的一天你都记不清楚！真是搞笑！然后我说你坦诚一点说不定我还会原谅你，最后他才说是他前女友，他也给我解释说没有联系了也给我在微信上查了的确没有这个人了。为了这事我们当天大吵过，我还动手打了他一巴掌，他既然也动手打了我一巴掌{不过他没怎么用力}我当时蒙了，心想他既然还手！气的我收拾衣服就走他把我拦住不让我走，把我的钱包也抢了。最后我还是夺门而入，你们说我该不该原谅他？但是他的钱都是给我在管，现在小孩快两岁了！我该怎么办？