我很爱他

我现在该怎么办，现在我知道我老公带了女人回家睡的之前，我也爱上了别人，也因为我知道了了以后和我老公吵架，我就搬出去和他住了，他也是有家的人，她老婆对他也一点不好，什么事不做的那种，他也很爱我，可是进过这两个月的时间，我发现他还是想回他那个家的，我该怎么办？