离离婚不远了吧？

我和孩子爸爸在一起快六年了，小孩子四岁、现在他在上班，我在家带小孩，一天见面时间很少，即使他下班回来也都是我们睡觉了，最近和他爸爸闹矛盾、前几个月也闹过一次离婚，差一点就离了，双方想着小孩，就算了，，但这几天我们一句话也没说，微信也删了，电话从来也不会打一个，现在我看着他我就烦，我心里一直想回老家了，不愿意呆在没有亲人的城市，可每每想到我那小孩、我恨不下心来，哎，我该怎么办？