Вряд ли агрессор переходит в физическому насилию, скорее всего это психологическое нападение поэтому думаю, что позиция "не тронь г…" не совсем правильная так же как и агрессивный ответ на нападение. В любом случае агрессор получает преимущество. Т.к. он подготовился, выстроил стратегию своего нападения.
Следовательно необходимо выстроить свою стратегию обороны (переходящую в нападение), которая должна показать агрессора с неприглядной, для коллектива, стороны. Этого агрессор боится больше всего ибо он желает укрепить свой авторитет в коллективе за Ваш счёт.
Для того, чтобы найти необходимые слова стоит поучится технике конфликтных переговоров. Специалисты и книги по таким переговорам существуют.