难以忍受吵架以至于不愿与人交往

想知道这是不是一种需要改变的心理问题。我觉得自己比较温和,不会主动攻击他人,但是身边的家人和朋友却会说出让我觉得过分的话,让我感到很难受,所以总是和他们周期性的产生矛盾,让我感到很厌倦。为了避免这种矛盾,我甚至不想任何人交往,除了那些和我比较像的人。我最大的困扰是,这主要是我自己的问题吗,太敏感,或者是我不够强大。还有为什么别人说话那么难听,虽然有人告诉这世界就是这样只能改变自己,但我还是难以忍受。