...а человечеству и вовсе тысяч так сто лет. До того наблюдать было некому, раз уж на то пошло. Да и продолжительность оборота Земли вокруг Солнца не всегда составляла 365 дней. Я уже молчу про продолжительность суток, которая раньше тоже была заметно меньше. Толку-то?
Год как единица измерения не привязан к вращению Земли. Это просто единица изменения.
Ну а с возрастом Вселенной всё ещё проще. Никто ничего не мерил. 13,8 млрд. лет - это расчётный возраст Вселенной согласно модели ΛCDM, принятой в современной космологии. Притом с немалой погрешностью. Вполне возможно, что определённый неверно, - но, коль скоро лучшей теории у нас нет, принимаем результат расчёта на веру, ибо опровергнуть его нечем, а в остальном теория работает.