Такое окошко реализуется по средствам html css в пару строк, html вставляете в редакторе темы в файл header.php а css в style.css и готово! Вот пример https://codepen.io/findersen/pen/agJZqe измените ширину, высоту и положение относительно экрана как вам нужно.
Зачастую проще и быстрее сделать "руками" чем сидеть и разбираться в плагинах.
Но если уж очень принципиально плагин, то попробуйте это https://ru.wordpress.org/plugins/mystickyelements/
Первый
Elementor Pro - Можно создавать поп-окна. На их основе легко создать выдвижную боковую панель. Красиво, стильно! В такую панель можете добавить любой контент.
Заплатить 49$ в год за Elementor и нагрузить движок, чтобы создать простейший элемент на сайте, ну вы советуете.... Читать дальше