Тут всё очень просто.
Запускаем браузер. Его иконка появится на панели задач. Именно на панели задач нажимаем правой кнопкой мышки на иконку запущенного браузера и выбираем пункт Закрепить на панели задач.
Открепляется без запуска браузера.