Вот прям "почему" вам вряд ли кто-то скажет. Глобальные вопросы в духе "Почему вселенная устроена именно так" это что-то из области философии. Физика строит модели описывающие наблюдаемые явления и смотрит что из них следует.
Во-первых нужно заметить, что совершенно необязательно воспринимать лямбда-член в уравнении Эйнштейна именно как энергию чего-то
Если его не переносить в правую часть, где энергия вещества, а оставить слева, то можно считать его связанным именно с геометрией. Ну вот так Вселенная устроена, что геометрическая часть уравнения выглядит так.
Если же все-таки перенести его в правую часть, то он будет действительно соответствовать некому веществу с очень странным уравнением состояния где давление равно минус плотности энергии p = -e
Можно считать эту энергию фундаментальным свойством самого вакуума, так, наверно понять проще всего. Каждому объему пустого пространства соответствует какая-то постоянная энергия. При этом логично, что если становится больше пространства, то и его энергии становится больше. Но с вакуумом есть небольшая проблема, что экспериментальное значение лямбда члена отличается от теоретической энергии вакуума на 120 порядков.
Тогда можно предложить другое объяснение, по наблюдаемым эффектам совпадающее с энергией вакуума. Считать что темная энергия - это некое особое вещество с этим странным уравнением состояния. И теперь, если вспомнить школьную термодинамику, связь энергии, давления и работы, можно написать, что давление - это минус производная энергии по объему. p = -dE/dV. И объединив это с уравнением состояния p =-E/V, легко получить, что плотность энергии остается постоянной. В таком объяснении можно сказать, что энергия растет из-за положительной работы при расширении, потому что давление отрицательное в отличие от привычных нам веществ.
Но это тоже еще не все, хотя лямбда-CDM модель и принята как стандартная, ученые допускают, что на самом деле плотность темной энергии может меняться. И тогда в уравнении эйнштейна уже не лямбда-член, а полноценный тензор энергии-импульса некого вещества.
Если в уравнении состояния этого вещества ввести константу w, которая в случае лямбда члена равна -1 p = w*e, то окажется, что при w > -1 плотность падает, при w < -1 даже растет! Отличие этих моделей будет проявляться в деталях расширения Вселенной. На данный момент можно сказать что плотность постоянная с большой точностью, но абсолютно это установить вряд ли удастся.
Это ещё что, интересней то, что сама длина волны и скорость света меняется с развитием и расширением вселенной, так как время для прохождения одного отрезка тогда и сейчас одно и то же.