Судя по обсуждению в комментариях, все не так просто. Возможно, это Вы не умеете управлять своими чувствами. О чем это было с дверью, которую он хотел закрыть? На семинаре это он Вас разозлил? Или Вы разозлились? Почему Вы разрешаете себе портить свои нервы из за того, что человек ведет себя не так как Вам хочется? Почему Вы думаете, что вправе управлять этой дверью?
Похоже на ситуацию, которая бывает, если этот Ваш человек является низкостатусным в группе, остальные его игнорируют, а Вы возможно из за чувства вины втягиваетесь в разговоры с ним, страдая от того, что всеобщее презрение, которое испытывает от группы он, распространится и на Вас. Т.е. Вам неприятно сидеть рядом с изгоем. Хотя это только мои домыслы. В любом случае Вам будет очень полезно перестать злиться на него, никуда из группы не уходить, а использовать все это для тренировки самообладания. Я не имею в виду подавление своего раздражения, а недопущение этого чувства, спокойствие и уверенность в себе. Если справитесь, получите бонус на всю последующую жизнь и карьеру.