Так и есть. Чтобы увидеть объект — нужно, чтобы свет от этого объекта попал вам в глаз. Ну или другая форма энергии на другой измерительный прибор. И эта форма энергии будет лететь до вас со скоростью, не превышающей скорость света. Что займëт некоторое время.
Вы будете видеть объекты в прошлом, даже когда находитесь очень близко к ним. Но как-то заметно это становится только на больших расстояниях. Расстояние в 1 световой год соответствует задержке в 1 год.
Кстати, засчëт эффекта Доплера, ваш гипотетический наблюдатель будет видеть события на Земле замедленными или ускоренными — в зависимости от того, двигается ли он к Земле, или от неë.
А засчëт расширения Вселенной, для наблюдателя из далëкой галактики все цвета в нашей галактике будут смещены в красную сторону спектра.