该离婚吗

孩子才三岁，老公在孩子怀孕时候跟一个小姑娘搞暧昧，上床，后来女的纠缠，我知道后两个人断了，一岁时候投资被骗，欠下高利贷，卖了我们的房子，告诉我还清了，其实没还清，后来利滚利又出来200万，现在卖了他父母房子和最后一套房子，我歇斯底里骂过，说要离婚，后来他也决定离婚，但跟我们家里在一起时候非常好，对孩子对我都好，可为什么老犯错误，我想为了孩子给婚姻机会，他自尊强，我骂的太多了，现在他反而说过不下去了，离婚是肯定的，但是他说为了孩子不会结婚，除非孩子大了同意了什么什么的，我还是有点不舍，但不知道该不该离，因为孩子家庭，还有一点依赖，舍不得，但又怕重蹈覆辙错误还继续