"Совершенно иное образование" в вопросе не вносит ясность какое было первое образование. Вы поступили на бюджетную форму обучения или учились на платной основе? Если учились на платной основе, то можете поступить второй раз на бюджет (гражданин РФ может учиться на бюджете только один раз).
Поступить на бюджетное место сложнее, чем на платное. Высокий балл по ЕГЭ, льготы или целевое направление даст преимущество.
Каких-либо ограничений по возрасту не предусмотрено на законодательном уровне. Тем не менее возрастные нормы все же уместны, например, в аспирантуре обучиться на очном отделении могут люди не старше 35 лет, на заочном - не старше 45 лет.
Еще нюанс: результат ЕГЭ действительны 4 года, придется сдавать ЕГЭ еще раз. Нужно уточнить в Вузе какие результаты вступительных испытаний требуются для поступления на выбранную специальность. Речь идет о физике, то чем выше баллы, тем больше шансов. Условия приема в МИФИ МФТИ, физфак МГУ разные, уточните и подготовьтесь. В 23 года поступать не поздно.