Индексация сайта

[galtaras]

Дорогие вебмастера,приветствую Вас!

Помогите разобраться в  robots.txt

Яндекс не тестирует страницы,ссылается на его запрет.
Мой robots.txt

User-agent: *
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*

User-agent: Yandex
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Host: название сайта
Подскажите,что не так.
Не знаю как поправить,не сильна в этих вопросах.
Спасибо.

[krock]

Какие то плагины seo еще установлены? я на форуме уже размещал мой robots.txt для Wordpress, поищи. Прекрасно работает 

[Michelangelos]

Тут помогут http://www.seobuilding.ru/seo-forum/wordpress/uslugi_po_dvizku_wordpress/. Парень спец, решит все проблемы.

[vsepronet]

Сделайте так
User-agent: *
Disallow:
И все будет цитировать

[bumer]

или уберите вот это
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes

Ивсе будет Ок

[smolnyi]

Посмотри в админке -> параметры -> приватность, стоит ли там отметка на фразе: "Я хочу, чтобы мой сайт был виден всем, включая поисковые системы (например, Google или Яндекс) и сервисы архивации."

Добавлено: 05-08-2011, 15:20:00
Или попробуй поменять на:

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /feed
Disallow: */feed
Disallow: /*?*
Disallow: /*?
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /search/*/feed
Disallow: /search/*/*
Disallow: /tag/
Allow: /wp-content/uploads/

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments

[profilink]

Знающие люди!
Помогите с индексацией,я в этом вопросе чайник,поэтому прошу помощи объяснить:
1)Где и как прописать ключевые слова(в самом сайте,он на Ukoz)
2)Как проиндексировать сайт в Яндексе,Гугле

[ss2o]

Добавьте команду именно для Яндекса, и еще
Я у себя убрал
Disallow: /*?*
Disallow: /*?
 и яндекс проиндексировал значительно больше страниц.

[Ametist]

Сейчас еще раз смотрела FAQ Яндекса, и задумалась о дополнительной функции для робота, прописываемой в robots.txt (вот в этой теме нашла упоминание)

Crawl-delay:

Кто пользуется? Действительно ли улучшается пребывание робота на сайте и загрузка страниц?

[kashubasv]

Здравствуйте!
Подскажите пожалуйста, как запретить индексацию страниц с адресом вида "http://sait.ru/page-name/#more-11". При этом страницы типа "http://sait.ru/page-name" должны индексироваться.