爱上已婚花心男的我，该怎么办？

我今年32岁，已婚，有个5岁的女儿！结婚7年，老公对我还算好，前两年在外地工作，分居两地，我一直一个人在家，小孩公公婆婆在带，导致一个人经常感到孤独！今年1月份我单位一已婚男同事加了我微信表明追求我，追我的时候很热情，随时都很关心我，一有时间就会陪我聊天、陪我打发时间，可能是一个人寂寞的太久，突然有个人关心你就心动了。有一天应酬我喝醉了主动跟他联系，然后他来接我，我主动吻了他，在他车上我们吻了很久，也是从那个晚上开始我的烦恼也开始了！接触一段时间我们开始发生了性关系，后来跟他一次聊天后我才知道他在他老婆怀孕期间就出过轨，为此他老婆差点把孩子打掉，后来他老婆还是选择了原谅他。这么多年他还追过我我们单位另外两个女同事，但没有发生关系，他说我是他婚后出轨的第二个女人，也是他最后一个，相见恨晚，他爱我！可是我知道他这一系列风流事后，我心里就有了个疙瘩，这样一个花心男人我们的结局肯定悲剧，而且我也会被伤的很惨，但是我却放不下他，我迷恋跟跟他缠绵时的快感，我该怎么办？我要如何跟他断了这段情，断了后我上班碰到他要如何面对他？