Question

здравствуте помоите пожалуйста. Файл Sitemap выдает вот такие предупреждения. 
Robots.txt сама поменять не могу не меняется 
Предупреждения Доступ к URL заблокирован в файле robots.txt. 
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt. 
Значение: http://www.rabota-online1.ru/forum/0-0-0-36/ - 4 апр. 2015 г. 
Значение: http://www.rabota-online1.ru/forum/0-0-0-37/ - 4 апр. 2015 г. 
Значение: http://www.rabota-online1.ru/forum/0-0-0-6 - 4 апр. 2015 г.

 

Answer 1

Если вы видите это предупреждение, это говорит лишь о том, что вы поспешили с добавление сайта в очередь на индексацию когда еще действовал карантин.

Что делать сейчас? Наполнять сайт уникальными материалами.

Далее - перейдите в вебмастере в пункт - Сканирование - Посмотреть как Googlebot, далее в шкалу адреса вставьте урл одного с ваших материалов, после жмем на кнопку сканировать и Добавить в индекс.

Это должно привлечь робота на ваш сайт и как вариант робот заново прочтет ваш роботс и индексация пойдет быстрей.

Comments

Как такккккк???Я оплачивала пакет базовый и у меня начинал сайт индексироваться с доменом 3 уровня,теперь я просто поменяла на новый домен и отправила на новую индексацию.Что теперь все ,что я оплачивала 347 руб коту под хвост?

---

Проблема не в платном пакете услуг, а ваша ошибка, что вы либо по незнанию, что на новом сайте после создания действует карантин на 30 дней, вы попытались добавить его в очередь на индексацию.

Робот такие вещи запоминает быстро и хранит все это на серверах гугла.

Проделайте, то что я описал выше и робот в ближайшие дни зайдет на ваш сайт либо сегодня же начнет индексацию если вы все выполните.

---

Нажимаю сканировать,у меня напротив ссылки.Написано не найдено.И еще в начале написано.Переадресовано

---

В поле где нужно ввести ссылку, введите - index/zarabotok_na_videorolikakh_youtube/0-5 далее нажмите сканировать, после сканирования ниже появится ваша страница, нажмите кнопку - Добавить в индекс.

После появится окно - Способ отправки, где отмечаем пункт - Сканировать только этот URL и жмем кнопку - Отправить.

---

а что значит переадресовано?

---

не знаю о какой переадресации вы говорите, не видел в вебмастере подобного

---

Показать Строк: 25 1-10 из 10 Путь Тип робота Googlebot Запрос на отображение Статус Дата /index/zarabotok_na_videorolikakh_youtube/0-5 ПК Переадресовано URL отправлен для индексирования 04.04.15, 8:08 /index/zarabotok_na_videorolikakh_youtube/0-5 ПК Переадресовано URL и связанные страницы добавлены в индекс

---

HTTP/1.1 301 Moved Permanently
Server: uServ/3.2.2
Date: Fri, 03 Apr 2015 16:01:31 GMT
Content-Type: application/octet-stream
Transfer-Encoding: chunked
Connection: keep-alive
Keep-Alive: timeout=15
Location: http://www.rabota-online1.ru/
Cache-Control: private

Answer 2

Предоставьте примеры страниц с предупреждением

Comments

http://www.rabota-online1.ru/forum/0-0-0-36/

---

Вот Роботс User-agent: *
Allow: /*?page
Allow: /*?ref=
Disallow: /*?
Disallow: /stat/
Disallow: /index/1
Disallow: /index/3
Disallow: /register
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /index/sub/
Disallow: /panel/
Disallow: /admin/
Disallow: /informer/
Disallow: /secure/
Disallow: /poll/
Disallow: /search/
Disallow: /abnl/
Disallow: /*_escaped_fragment_=
Disallow: /*-*-*-*-987$
Disallow: /shop/checkout/
Disallow: /shop/user/
Disallow: /*0-*-0-17$
Disallow: /*0-0-

Host:rabota-online1.ru

Sitemap: http://rabota-online1.ru/sitemap.xml
Sitemap: http://rabota-online1.ru/sitemap-forum.xml

---

http://www.rabota-online1.ru/forum/0-0-0-36/ это не ошибка это правила форума. они заблокированы системным роботсом. так и должно быть. вашего вмешательства это не требует. дайте ещё примеры ссылок

---

так они все такие

 http://www.rabota-online1.ru/forum/0-0-0-37/

http://www.rabota-online1.ru/forum/0-0-0-6

Посмотрите пожалуйста правильно сделан Sitemap?

---

эти страницы тоже должны быть закрыты. есть ещё примеры?

если у вас системная карта сайта то все должно быть в порядке. для обновления удалите карту сайта файл sitemap.xml из файлового менеджера и потом перейдите по ссылке http://rabota-online1.ru/sitemap.xml

---

Спасибо за ответы))