我害怕冲突怎么办？

前段时间我们单位搞活动。有个人说话特别难听，然后我就试着跟他沟通。但是他就是那种一副你说什么也没用，我就不跟你沟通的样子。我很不舒服。还有我不大会表达自己的感受，看到其他人起冲突，我就特别害怕。跟别人说起来，别人说我害怕冲突。我现在很难受，怎么办？