Вы можете указать роботу на страницы, которые не нужно индексировать с помощью файла robots.txt. Как это сделать, можно прочитать на странице нашей Помощи: https://yandex.ru/support/webmaster/controlling-robot/robots-txt.xml