Как определить визуально, прописан ли на сайте robots.txt

[Алинка]

Как новичку, который учится проводить анализ сайта с точки зрения его оптимизации узнать: есть ли robots.txt?

[Xosr]

Адрес сайта/robots.txt
http://www.sait.ru/robots.txt

[Ryar]

Для браузера FireFox есть плагины, RDSbar и SeoQuake они показывают много полезных параметров, в том числе и визуально видно есть ли на сайте robots.txt

[Алинка]

Хоср, спасибо! Зашла на этот адрес:
User-Agent: *
Disallow: /cat-6.html
Disallow: /cat-8.html
Disallow: /cat-11.html
Disallow: /cat-7.html
Disallow: /catinfo-621.html
Host: www.ngs-penza.ru

Это значит, что все верно прописано, без ошибок?

[Xosr]

Это значит, что все верно прописано, без ошибок?

А кто его знает как им надо. Не каждый день ведь работаю с НефтеГазоСервис компаниями. 

По теме: вроде правильно.

[kstg]

Хоср, спасибо! Зашла на этот адрес:
User-Agent: *
Disallow: /cat-6.html
Disallow: /cat-8.html
Disallow: /cat-11.html
Disallow: /cat-7.html
Disallow: /catinfo-621.html
Host: www.ngs-penza.ru

Это значит, что все верно прописано, без ошибок?

смотря что нужно открыть/закрыть для поисковиков. в данном случае у вас закрыто 5 станиц вашего сайта и указано главное зеркало вашего сайта, собственно сам домен.
в самом синтаксисе ошибок нет

[biggushechka]

http://robotstxt.org.ru/robotsexclusion/guide
Прочитайте эту статейку, там достаточно подробно расписано, что, куда, зачем и почему. От того,что Вам объяснят конкретно Ваш роботс толку не будет, все равно придется вникать самостоятельно:)

[Алинка]

Спасибо за ссылку, прочитаю!

[shabananton]

Кстати, есть еще программулина полезная: Site Auditor. Там тоже можно проанализировать сайт и посмотреть robots.txt

[biggushechka]

его в таком случае можно и в вебмастере просмотреть:)