В природе жизни на этой планете есть три способа реакции на опасность: бей, беги, замри. Какой-либо способ есть у каждого, кто умудрился выжить и добраться до компа, что бы задать вопрос).
Предположу, что ваш способ "замирать". А вы бы хотели "бить". Но какой не есть но все же имеется, только чувствуете вы себя при этом "каким-то овощем".
Все потому, что в вашей голове есть некий идеал правильного ответа на опасность. И Ваш не считается идеальным с вашей точки зрения.
Хорошо то, что вы ощущаете, что периодически хотели бы дать отпор тому, кто нарушает ваши личные границы. Только происходит это с некоторой оттяжкой во времени. Что бы эту ситуацию исправить, хорошо бы обратиться к психологу, который выступит сторонним наблюдателем за вашими внутренними процессами. В результате вы сможете своевременно слышать в себе внутреннюю потребность и реагировать, что называется на месте (защищать себя и границы дозволенного с вами обращения). А каким способом из трех защищать себя вы выберете - уже вторично.