放弃异地高薪工作

我是个女人，我老公在家工作，薪水不高，我该放弃异地高薪工作吗，回去家人身边？我放心不下孩子，老公的脾气不太好，孩子带的不太好。我这份异地工作工作时间不长，担心回去找不到好工作。