如何面对感情出轨?

病情描述：最近看老公老是打电话发短信,在我了解了情况以后知道他在和一个出外打工的邻居聊天,她也是有老公孩子的人了,老公离婚但他说只是玩玩不是真的,但我还是受不了他们的聊天记录,经常在脑子里转,现在他说什么我都很怀疑,离婚舍不得孩子现在又怎么面对他,我该放弃他吗?