二婚的烦恼

我跟我现在的老公都属于二婚，彼此都带一个孩子，刚刚开始的时候，他还能做到对我孩子好。我对他很和我的孩子都是一样的。后来他就比较偏向他自己的，他家里人也是，我和他之间也没有信任，跟他在一起的两年多，他说过很多次离婚了，现在的我，真的累了，我想离婚，可是他又不同意，我该怎么办？我家人说为了孩子忍忍吧！过几年孩子就长大了，可是孩子现在才五岁多，我真的很苦恼，我和他之间也没有什么感情，现在我和他已经两地工作，没有在一起生活了！也很少联系，更加不想联系了。