Информации для такого сложного вопроса настолько мало, что попытка поставить диагноз практически наверняка обреченное на провал. Не понятно, ни что вы назваете расстоянием, ни сроки этого "расстояния", ни то, что у вас происходит при встрече… Можно конечно налить воды, как в одном из предыдущих комментариев, но это вряд-ли поможет.
Но на вскидку, создается впечатление, что вы обуреваем страстью, а не любовью. Которая, в отличие от последней требует постоянной подпитки личным общением. А если к этому еще и присоединен секс, о чем тексте ни слова, то и вовсе подобная картина реализации сексуальной привязанности без близости человеческой вырисовывается полностью.