Комментарии на: Правильный robots.txt для WordPress

От: Дима

Дима — Sun, 17 Jan 2010 13:59:05 +0000

Декус научи даунов делать робот ткст и ситемап для простых сайтов. А то я сделал ситемап txt и ждал пока проиндексирует.

Хотя с твоей статьей как быстро проинлдексировать сайт, ситемап нах оказалься ненужен. Я сделал новую страницу, а на следущий день она уже в индексе .

От: onuf

onuf — Thu, 14 Jan 2010 13:21:04 +0000

Сейчас я кину на народ ссылку dekusworld.ru/wp-content/ и она будет в индексе. Закрой ее дизалоу

От: dekus

dekus — Thu, 14 Jan 2010 09:39:22 +0000

В моем еще добавки для обработки гугл адсенс и делисио и поиска по картинкам.

От: onuf

onuf — Thu, 14 Jan 2010 08:01:26 +0000

Загрузил твой через webmaster.yandex.ru/robots.xml#results — вообще все другое. Где-то ты лукавишь, если не сказать покрепше

От: dekus

dekus — Thu, 14 Jan 2010 06:00:17 +0000

Работает? Работает! Мне указанный алов вообще не нужен у меня там индексировать нечего. Со всеми остальными претензиями

1. В жопу

2. Напиши правильно

От: onuf

onuf — Wed, 13 Jan 2010 19:08:12 +0000

Нахрена тебе исключающий обход Allow: /wp-content/uploads, если у тебя нет запрета на wp-content/? Короче, местами бред

От: onuf

onuf — Wed, 13 Jan 2010 17:43:17 +0000

Ради интереса посмотрел на webmaster.yandex.ru/robots.xml#results . dekusworld.ru/wp-admin разрешен, т.е. все, что в секции User-agent: *, почему-то не учлось

От: onuf

onuf — Wed, 13 Jan 2010 17:40:10 +0000

А при чем тут .htaaccess?

«Правильный .htaccess для WordPress по мнению Dekus`а»

От: dekus

dekus — Wed, 13 Jan 2010 15:19:45 +0000

таймаут, с которым поисковый робот Яндекс считывает страницы вашего сайта с сервера

От: nameless

nameless — Wed, 13 Jan 2010 12:16:58 +0000

dekus, а что означает строчка Crawl-delay: 5 ?