Людей раздражают в других разные черты. Кого-то раздражает тупость, кого-то - скупость, кого-то раздражает излишняя щедрость, кому-то не нравится неправильная форма бровей и т.д. Важно, чтобы было взаимное уважение и симпатия от тех людей, которые нравятся вам. Зачем ставить себе задачу устраивать всех?
То, что вы пишите, звучит как установка, внушенное убеждение. Возможно, когда-то кто-то вас ругал таким образом, и вы поверили в это? Также, острое недовольство собой может быть связано с депрессивным состоянием. Когда человек чем-либо угнетен, подавлен, ему труднее перерабатывать информацию, труднее находить подходящие слова, снижается скорость реакции.
В любом случае, если подобные мысли часто вас посещают и влияют на вас сильно, имеет смысл обратиться за помощью к психологу.