Щель между стеной и подоконником можно заделать по всей длине монтажной пеной. Небольшие щели в стене или в слое теплоизоляции можно заделать герметиком. Силиконовый герметик глубоко проникает в мельчайшие зазоры и полностью герметизирует. Если речь идет о наружной теплоизоляции, то откосы окна можно защитить от промерзания экструдированным пенополистиролом. На https://moellersill.ru/ читайте про классные подоконники, с которыми проблем не возникает)
Если там большая щель, то можно утеплить по всей длине подоконника монтажной пеной. Если щели небольшие, тогда для их заделки подойдет силиконовый герметик. Обязательно перед утеплением обработайте поверхности герметиком или антисептиком.
Спасибо все сделал!