Скорее всего это связано с тем, что ребёнок просто не знает, что ему запоминать - в течении жизни малыш узнает различные вещи и когда набирается запас определённых понятий, память начинает нормально функционироват и тогда запоминаются какие-то воспоминания. Они недолговечны и вспомнить их можно с очень маленькой вероятностю. Главное, что во время рождения и пытаемся запомнить не моменты первых лет жизни, а основные навыки и способы взаимодействия с окружающей средой
На самом деле информация никуда не уходит, она систематизируется в своеобразных модулях, подкастах... вопрос - в её воспроизведении (такое может быть, к примеру, при нештатной ситуации)