Правильный robots.txt для WordPress
Янв 13, 2010 Поисковая оптимизация
Наконец-то свершилось. DekusWorld.ru в поиске стал представлять из себя, то что надо мне, а не то, что надо поисковикам.
В поиске остались четко страницы с постами. чтд.
Причиной столь радостного явления стал правильный robots.txt. Я давно собирался привести блог в порядок, но то руки не доходили, то потом был бан и было лениво, пару недель назад таки было выполнено. Теперь осталось еще проключить кеширование для ускорения загрузки и будет вообще супер...
Правильный robots.txt для WordPress по мнению Dekus`а
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /tag
Allow: /wp-content/uploads
Sitemap: http://www.dekusworld.ru/sitemap.xml
User-agent: Yandex
Crawl-delay: 5
Ссылки ниже представлены на правах рекламы, автор блога не несет ответственности за качество предлагаемых товаров и услуг.
Не нравится делать саттелиты на WordPress? Берешь резюме и идешь искать работу!
Конец блока рекламы
