Возможно это происходит потому, что вы перегружены общением в течении дня и это не совпадает с вашим социальным темпераментом (экстраверт - интроверт).
Возможно вам сложно выстраивать личные границы. Это может проявляться как в общении на работе, так и в личной жизни. Что вам мешает сказать когда вам звонит подруга, что вы устали и сейчас нет сил разговаривать?
Возможно ваше общение на работе несет высокий когнитивный диссонанс, то есть противоречит вашим ценностям. К примеру: приходится подчинятся или наоборот "строить" других, приходится обманывать и т.д.
Возможно у вас другая причина, поэтому попробуйте сами рассмотреть эту ситуация как бы со стороны из метапозиции. Или абстрагироваться и представить на этом месте другого человека как бы он себя вел и что чувствовал.