Сделайте паузу в отношениях - отдохните друг от друга, некоторое время поживите раздельно. Если через неделю раздельного жительства Вы почувствуете, что Вам лучше без него, чем с ним, то стоит попытаться понять в чём причина, можно ли улучшить отношения, и стоит ли их улучшать... Но если Вам лучше не станет, то возможно, что причина того стресса, который Вы испытываете не в мужчине, а (допустим) в Вашем перенапряжённом образе жизни. Мужчина же в данном случае немного добавляет раздражения, но не является его основным источником. В любом случае - сделайте паузу, успокойтесь и разберитесь с мыслями... не рубите с горяча.