离不离婚

结婚三年，外遇三年，和媳妇工作生活都顺当，就性生活不和谐，感觉她性冷淡。外遇是离异的，带个男孩，我们性生活非常和谐，在一起有爱人的感觉，和媳妇更像是过日子的搭档。现在狠痛苦，不知道该不该离婚，是性重要，还是生活更重要呢？有时感觉就这么过下去，太委屈啦！有时感觉性只是其中一部分，生活重要，非常纠结和痛苦！