Корректная настройка директивы host в robots.txt

голоса: 0

Здравствуйте. Читал, что директиву host в файле robots.txt понимает только яндекс. Google при проверки файла robots.txt с директивой host будет выдавать ошибку.

Корректно ли будет в файле robots.txt задать директиву host только для ротота яндекса вот так?

 

User-agent: *
Allow: /*?page
Allow: /*?ref=
Disallow: /*?
Disallow: /stat/
Disallow: /index/1
Disallow: /index/3
Disallow: /register
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /index/sub/
Disallow: /panel/
Disallow: /admin/
Disallow: /informer/
Disallow: /secure/
Disallow: /poll/
Disallow: /search
Disallow: /abnl/
Disallow: /*_escaped_fragment_=
Disallow: /*-*-*-*-987$
Disallow: /shop/checkout/
Disallow: /shop/user/
Disallow: /*0-*-0-17$
Disallow: /*-0-0-

Sitemap: http://www.mysite.ru/sitemap.xml
Sitemap: http://www.mysite.ru/sitemap-forum.xml

User-agent: Yandex
Host: www.mysite.ru

| Автор: | Категория: Яндекс Вебмастер

Ответов: 2

голоса: 0
 
Лучший ответ
User-agent: Yandex  это удалите
| Автор:
Выбор ответа лучшим | | Автор: Yuri_Geruk
Голоса: +1
Да, все правильно.
| Автор:
...