Перестать играть в Спасателя и "доктора" для него, оправдывая его поведение какими-то "травмами". Выйти из слияния и признать, что Вас не устраивает его отношение к Вам. И это Вы, не "отношения" страдаете.
Дальше логично искать причины своих страданий и с ними разбираться. Спойлер: причины наших эмоций всегда в нас самих, а не в партнёре. Пока очевидно, что у Вас созависимость, которой более чем достаточно для страданий.
А что до партнёра, то, возможно, окажется, что его отношение к Вам действительно недостойно и придётся выбирать.