Однажды мне задали вопрос, а как сделать так, чтобы страница или запись на сайте, созданном на WordPress, не индексировалась поисковыми системами? Я провел небольшое исследование и определил несколько способов решения этой задачи.
Способов несколько: можно использовать файл robots.txt, можно вставлять в тело страницы специальные HTML теги, а можно воспользоваться сторонними плагинами.
Спрятать страницу от поисковых систем с помощью плагина Yoast SEO
Этот плагин заслуживает целого обзора, но в этой статье давайте остановимся только на одной из его функций. Установите этот плагин на свой сайт, ссылка для скачивания тут https://ru.wordpress.org/plugins/wordpress-seo/
После активации плагина существенно меняется внешний вид публикации и изменения записей и страниц сайта на WordPress. Плагин добавляет свой метабокс, в котором можно задать ряд параметров, влияющих на индексацию вашего контента поисковыми системами.
Нажмите на кнопку “Дополнительно”. В этой части метабокса плагина можно задать значения тега meta для роботов поисковых систем. Выберите в первом выпадающем списке “Meta robots index” значение noindex и установите nofollow для поля “Мета-тег robots follow”. Все, опубликуйте вашу страницу и проверьте ее исходный код: в секции head будет вставлены теги, влияющие на индексацию вашей страницы.
Спрятать страницу от поисковых систем с помощью файла robots.txt
Файл robots.txt должен находиться в корневой папке сайта, к этому файлу обращаются роботы поисковых систем, чтобы получить те правила, которые вы пропишите с помощью специальных команд.
Вы можете редактировать этот файл локально, а затем закачать его в корневую папку вашего сайта. Можно использовать Notepad++ с расширением NppFtp, например, для редактирования файла сразу на хостинге.
Добавьте в файл robots.txt следующие строки:
1 2 |
User-agent: * Disallow: /ссылка-страницы/ |
Первая строка говорит о том, что следующее правило необходимо применить ко всем роботам поисковых систем.
Во второй строке нужно указать относительный адрес вашей страницы.
Если, например, адрес вашей страницы http://smartyschool.ru/pro-wordpress/, то во второй строке файлы robots.txt необходимо указать /pro-wordpress/. Не забудьте сохранить ваши изменения.
Существует ряд особенностей в использовании файла robots.txt. Он доступен для всех, т.е. содержимое этого файла можно открыть прямо в браузере, набрав адрес вашего домена, а затем /robots.txt, ну, например, вот так http://smartyschool.ru/robots.txt. Поэтому, если вы хотите спрятать какой-то важный контент не только от поисковых систем, то этот метод не подойдет.
Защитить страницу от просмотра методами консоли WordPress
Такой метод использует несколько другой подход. В разделе создания записи или страницы консоли WordPress можно нажать на ссылку “Видимость” и выбрать пункт “Защищено паролем”. Введите свой пароль, опубликуйте или обновите страницу, и теперь для доступа к вашей странице (контенту на ней) вашим посетителям необходимо будет ввести пароль.
Надеюсь, вы выберете подходящий для себя метод из перечисленных выше. Более подробную информацию по использованию CMS WordPress вы можете найти на нашем курсе “PRO WORDPRESS”.