Как отыскать и убрать дубли страниц на сайте, создаваемые древовидными комментариями replytocom?
При использовании движка WordPress можно заметить, что комментарии выводятся в форме дерева.
Содержание:
Таким образом, очень удобно находить, читать ответы, отвечать на них, чем если бы комментарии шли бы друг за другом.
Но в этом есть один небольшой минус, потому что такая структура комментариев создает дополнительные дубли страниц на сайте.
Дубли страниц на сайте
Чтобы понять это, достаточно навести мышку на ссылку Ответить. Внизу, в браузере показывается ссылка, на которую ведет этот комментарий.
И здесь можно заметить, что к адресу конкретной страницы присваивается параметр replytocom. Это и есть те дубли, с которыми нужно обязательно бороться.
Иначе это неизбежно повлияет на результаты поисковой выдачи сайта и трафик на него с поисковых систем.
То есть с каждым комментарием на любую статью конструкция движка WordPress формирует дубли страниц с параметром replytocom.
Для того, чтобы проверить, есть ли на сайте такие дубли страниц, переходим в поисковую систему Google и вводим запрос для данного сайта:
site:webentrance.ru. replytocom
То есть site: ваш адрес сайта и через точку параметр replytocom. Нажимаем Поиск в Google. Далее нужно нажать Показать скрытые результаты.
В открывшемся окне можно наблюдать все дубли страниц с этим параметром, которые есть в поисковой системе Google.
Пусть эти дубли и не попадают в основную выдачу Google, но все же присутствуют, в так называемых, его соплях. И таких дублей страниц на сайте может быть очень много.
Чтобы все эти дубли страниц удалить, нужно, в первую очередь, побеспокоиться, чтобы такие дубли больше не появлялись на сайте.
Убираем дубли страниц
Итак, открываем админ-панель сайта WordPress, переходим в Настройки, выбираем Обсуждение.
В открывшемся окне Настройки обсуждения в разделе Другие настройки комментариев надо убрать галочку Разрешить древовидные (вложенные) комментарии … и нажать
Сохранить изменения. Тогда все комментарии на сайте будут выводиться друг за другом в виде однородного списка.
Если вы считаете, что при таком расположении посетителям будет неудобно разбираться, кто на чей комментарий отвечает, то эту галочку надо оставить, а запретить эти комментарии в файле robots.txt.
Для этого надо дописать в файле robots.txt следующие директивы:
Disallow: /*? Replytocom
Disallow: /*?*
Disallow: /*?
Но это не значит, что поисковые системы будут реагировать на запрет на 100%, потому как файл robots.txt не считается для них обязательным условием для выполнения этих директив.
Обычно для Яндекса этого достаточно, чтобы не индексировать эти дубли. Что касается Google, то этого мало. Поэтому, чтобы дубли страниц не появлялись в индексе Google, нужно зайти в Инструменты для веб-мастеров, перейти на вкладку Сканирование, выбрать Параметры URL.
В открывшемся окне нажимаем Добавление параметра и добавляем replytocom, если Google не сделал это раньше. Напротив параметра в последней колонке нажимаем на ссылку Изменить.
В открывшемся диалоговом окне отвечаем на вопросы следующим образом:
- Изменяет ли этот параметр содержание страницы, которую видит пользователь? — Да, параметр изменяет …
- Как этот параметр влияет на содержание страницы? – ставим Другое.
- И самый важный момент – Какие URL, содержащие этот параметр, должен сканировать робот Googlebot? — ставим чекбокс – Никакие URL и нажимаем Сохранить.
Теперь нужно только ждать, когда роботы обратят внимание на этот параметр и уберут из выдачи все дубли страниц на сайте.