Question

Хочу снять ограничение в робот.txt на индексирование информеров для поисковиков.
Спасибо если ответите и поможите.

1. Это может повлиять отрицательно на мой сайт?

2. Почему юкоз поставил ограничение на индексирование информера?

3.  Чтобы снять ограничение нужно просто удалить эту строку из файла, или что то нужно дописать?

User-agent: Yandex
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /abnl/
Disallow: /google
Disallow: /twitter
Disallow: /facebook
Disallow: /yandex
Disallow: /vkontakte


User-agent: *
Allow: /*?page*
Disallow: /a/
Disallow: /api/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /abnl/
Disallow: /*?*
Disallow: /*_escaped_fragment_=
Disallow: /blog/*-987
Disallow: /blog/*-0-


Sitemap: http://www.israelisrael.ru/sitemap.xml
Sitemap: http://www.israelisrael.ru/sitemap-forum.xml

Answer 1

Пропишите стандартный. В конце допишите директиву Host: www.israelisrael.ru

вот так должно быть

User-agent: *
Allow: /*?page
Allow: /*?ref=
Disallow: /*?
Disallow: /stat/
Disallow: /index/1
Disallow: /index/3
Disallow: /register
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /index/sub/
Disallow: /panel/
Disallow: /admin/
Disallow: /informer/
Disallow: /secure/
Disallow: /poll/
Disallow: /search/
Disallow: /abnl/
Disallow: /*_escaped_fragment_=
Disallow: /*-*-*-*-987$
Disallow: /*0-*-0-17$
Disallow: /*-0-0-

Host: www.israelisrael.ru

Sitemap: http://www.israelisrael.ru/sitemap.xml
Sitemap: http://www.israelisrael.ru/sitemap-forum.xml

На счет информера. Если информер вставите скриптом, то он не будет индексироваться, если вставите кодом - будет. Имеется ввиду код информера $MYINF_х$ где х - это номер информера. Код можно получить в списке информеров напротив нужного

Comments

ну раз все хорошо, то не надо хост

---

Но Информеры же остаются закрытыми.

---

Вот что мне ответили в службе поддержки.
Поэтому у меня получилась путаница что правильно а что нет.

Да, Вы можете удалить указанную выше запрещающую строку. Для этого, создайте на Вашем компьютере файл robots.txt с нужным содержанием и загрузите его в файловый менеджер сайта.
Новый файл заменит системный.

---

не надо ничего удалять. информеры, вставленные кодом $MYINF_1$ прекрасно индексируются и с этой строкой. строка на такой информер не имеет влияния.

---

Хорошо Host я прописал хуже не будет.

Но я заметил ещё дополнительные изминения в файле робот который вы мне предложили.

Я особо не разбирался поскольку не особо в этом понимаю, но в предложенном вами роботе есть дополнения и отличие от моего робота.

Что это за различия и чем они мне будут полезны?

Спасибо

Answer 2

Стандартный Robots.txt написан правильно и его не стоит изменять, или стоит но только в крайних случаях.

Comments

Моя цель, ввести иформер на сайт, и чтобы поисковой робот индексировал выводимый текст.