Question

 Здравствуйте, подскажите правильный ли Файл robots.txt

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Sitemap: http://all-4droid.ru/sitemap.xml

User-agent: Yandex
Host: all-4droid.ru

А то что то меня гложат сомения из-за этого: http://c2n.me/3seQD1v 325 заблокированных страниц - многовато вроде))

Answer 1

Роботс у вас устаревший. Для директивы хост не нужно обращаться к Яндексу. На счет заблокированных ресурсов большая часть неактуальна совсем. Можете не обращать внимание. На отображение сайта они не влияют

Comments

То есть можно ничего вообще не менять? Или удалить:

User-agent: Yandex
Host: all-4droid.ru

---

User-agent: Yandex это не нужно