Чувство страха - одно из самых сильных чувств.
Вы подвергались этому чувству, жили с ним на протяжении нескольких лет. Конечно, нужно время для восстановления.
Причём, устранить источник страха не значит совсем избавиться от него. Допустим, если бояться змей, крыс, пауков и перебраться в такое место, где их нет, это не не означает, что страх ушёл. Просто сейчас человек в более безопасном месте.
А вот чтобы перестать бояться, нужно прорабатывать сам страх.
Поэтому, чтобы тревожность, связанная с прошлыми отношениями, не омрачала Ваши нынешние отношения, нужно проработать все те моменты, которые и вызывают у Вас тревожность.