Google проверяет веб-сайты через специального поискового робота, который называется Googlebot. Если этот робот выполнил проверку надлежащим образом, т.е. получил верные инструкции от веб-сайта (описанные в руководстве для веб-мастеров от Google), значит, рассматриваемый веб-сайт будет отличаться хорошим ранжированием в SERP и сможет обойти всевозможные штрафы, которые накладываются на веб-мастера вследствие неверной конфигурации meta.
Плагин Robots Meta позволяет автоматически настроить оптимальную конфигурацию meta-данных.
Возможности плагина:
- Управление индексацией RSS-каналов. С помощью плагина Robots Meta вы можете предотвратить нежелательную индексацию RSS-каналов своего веб-сайта. Плагин обладает следующими настройками: “noindex all RSS feeds” (отменить индексацию всех RSS-каналов) и “noindex the comment RSS feeds” (отменить индексацию RSS-каналов с комментариями).
- Индексация архивов и навигации. Плагин позволяет отменить индексацию страниц с результатами поиска, страниц входа в систему, страниц с архивами по авторам и по дате, страниц для рубрик и меток, а также индексацию вложенных страниц для главной страницы, что нередко вызывает головную боль у владельцев ресурса.
- Управление внутренними ссылками. Если вы всерьез взялись за SEO, вы можете добавить атрибут nofollow к тем страницам, которые не содержат в себе никакого контента, т.е. эти страницы не должны быть проверены роботами. Также вы можете управлять внутренней линковкой и устанавливать nofollow для архивов по рубрикам и меткам. Если же у вас слишком много внешних ссылок, вы также можете автоматически добавить к ним атрибут nofollow.
- Добавление верификационных мета-тегов. Поисковые системы, такие как Google, Yahoo и т.д, просят добавить специальный мета-тег, с помощью которого веб-мастер может подтвердить свои права на веб-сайт. Плагин позволяет автоматически добавлять верификационные мета-теги в header сайта.
- Специальные мета теги для каталогов DMOZ и Yahoo. С помощью плагина Robots Meta можно добавить мета-теги, предовтращающие проблемы для сайтов, расположенных в каталогах DMOZ и Yahoo (noodp, noydir).
- Встроенный редактор robots.txt. С помощью встроенного редактора можно удобно вносить изменения в файл robots.txt (обычно это делается через ftp).
- Встроенный редактор .htaccess.
Помимо всех перечисленных выше функций, вы можете также устанавливать meta правила для каждой конкретной страницы или записи.
http://devilmustcry.com/blog/robots-meta-plugin-makes-your-website-googlebot-friendly.html
Источник: oddstyle.ru