Question

Здравствуйте уважаемые! Такой вопрос: у меня на сайте с 27 апреля 3000 страниц попали в Яндексе в категорию Исключенные роботом. На Яндексе пишут, что Индексирование страниц запрещено в вашем файле robots.txt. Но я ничего в robots.txt не меняла, до этого дня все было нормально, проблем не было. Очень прошу, подскажите в чем дело, в чем проблема!!! Буду очень благодарна!

Answer 1

Посмотрите ответ - http://www.ucoz.ru/qa/index.php/30488 если у вас блокируются аналогичные страницы, то все правильно, так и должно быть. Если немного не то, наведите примеры таких страниц.

Comments

Спасибо за ответ! Но как же мне быть, половина страниц сайта не индексируется! Это тоже правильно? Как мне решить проблему индексации, убрать теги?

---

наведите примеры страниц которые блокирует роботс и которые для вас важны

---

Я прошу прощения за свою некомпетентность, но страниц много и до 27 апреля подобного не было, а с этого числа к-во страниц с 0 взлетело до 3000. Если Вы считаете, что это нормально, тогда нет вопросов, Вам виднее. Это ссылки не на статьи, а на страницы поиска, к примеру, http://potustorony.ru/search/%D0%90%D0%BD%D1%82%D0%B8%D0%B3%D0%B5%D0%BD%D1%8B/ Меня просто удивило такое к-во исключенных страниц именно после 27 числа.

---

Не только у вас появилось много таких страниц, как я ответил в теме по ссылке выше, все правильно, а то, что страницы лишь вот как вы говорите появились в вебмастере после 27 числа, это не есть плохо.

Все, что запрещено в роботсе, должно блокироваться. У все именно так, вы добавляете теги к материалам, посчитайте, сколько вы тегов добавили к каждому материалу.

Вот все эти 3 тыс, это собраны теги с всех материалов на сайте, так как они имеют структуру:

<a href="/serach/Оборудование итп/">Оборудование</a>

Все эти ссылки блокируются, как и должно быть. Была бы причина для беспокойства, но ее нет, все хорошо.

---

Огромное спасибо за ответ! Вы так любезны! Так доходчиво и подробно объяснили вопрос и успокоили не особо сведущего пользователя системы Ucoz. Еще раз СПАСИБО за потраченное на мой вопрос Ваше время.