На мой взгляд это очень правильно. Если моя супруга звонит мне когда я работаю, я ей говорю об этом и мы откладываем разговор на другое время , когда мы оба будем свободны от дел. Не получится поговорить днем- встретимся вечером и обсудим.
А Вы представляете, если он будет вме время думать о Вас? Когда ему работать?