Он не хотел, он их вернул. Ну, то есть хотел и вернул. За исключением Польши и Финляндии. Но Польша все-таки по итогам Второй мировой вошла в "лагерь мира и социализма", контролируемый из Москвы. С Финляндией такое не выгорело, конечно, уж больно - во всех смыслах этого слова - финны упирались, но по крайней мере "доброжелательный нейтралитет" и никакого НАТО Сталин им навязал.
Хотел, и немало вернул. На западе вернулись все территории отданные согласно Бресткому миру(кроме западной Польши) . Не очень вышло с Финляндией.
Для наглядности карта империи
https://geographyofrussia.com/wp-content/uploads/2014/12/31.jpg
Батенька, да вы недооцениваете мечты советского руководства довоенного периода. Минимум вся Европа, и желательно по мелочи, ну там Китай, Турция и прочие незначимые территориии.