Нужный уплотнитель продаётся в специализированных магазинах для пластиковых окон. В строительных гипермаркетах его покупать не стоит.
Только после (правильной) установки необходима регулировка и смазка окна. Потому как со свежим уплотнителем могут возникнуть сложности при закрывании.
Не справитесь сами,- зовите специалиста,- это обойдется дешевле, чем весь процесс замены от начала.