Потому что не сексом единым сыт человек.
Крепкие семьи держатся либо на любви, либо на расчёте. Но в обоих случаях -- на согласии и взаимопонимании. Они понимают потребности друг друга и заботятся об этом.
А потребностей у человека много.
Для примера можно посмотреть на иерархию потребностей Маслоу. Приоритизация спорная, но сам список потребностей хорош. Там есть, в частности, потребность в безопасности, уважении, эстетические потребности.
Чем лучше два человека понимают потребности друг друга и способствуют их удовлетворению, тем лучше им вместе.
Если же при фееричном сексе и неописуемой романтике один, к примеру, постоянно обесценивает чувства другого, то тот, чьи чувства обесцениваются, чувствует, что его не понимают, не уважают, не любят. Секс постепенно превращается в удовлетворение животной потребности, и вообще всё идёт к развалу отношений.