总是觉得别人在背后说我坏话

我是一个独生子，可能在人际关系上处理确实不很好，但是对任何人很真诚。上学时期，因为不太会和同学交朋友，曾经被孤立过，所以性格非常敏感。我在单位工作做人事，跟财务在一个办公室，由于工作经常和财务有冲突，而且财务就是那种老年大妈，经常和出纳嘀嘀咕咕的在说话，因为一个办公室，平时说话声音都不小，但是偶尔会突然听到他们的声音变小，而且有时候我还听到他们说“相处……”“奇葩……”“不懂事……”，因为一个办公室，如果正常说话，真的都能听得很清楚，但是有时间他们就是那种像说别人坏话那种嘀嘀咕咕的。我总觉得他们是在背后说我。