Отвечаю как человек, который вырос без отца.
На мой взгляд, ребёнку так говорить нельзя. Ведь вы в первую очередь выбираете себе спутника жизни и если вы с этим человеком счастливы не будете, то ребёнку он счастья тоже не принесёт.
Прислушиваться к детям нужно, но это общее правило и к этому вопросу оно имеет косвенное отношение.