Question

Добрый день!

Появляется очень большое количество страниц дублей из модуля index вида, как показано на рисунке ниже. То есть дублируются последние 2 числа. Можно ли как то запретить для индексации поисковыми системами это через robots?

Могу ли я как то повлиять на их появление?  Можно ли что либо сделать, чтобы они вообще не появлялись?

С уважением, Алексей.

Answer 1

В файл роботс можно прописать:

Disallow: *0-**-0-**

Comments

Добрый день, Юрий!  Подскажите, пожалуйста, в данном случае слеши точно не нужны после disallow? например, для указания на модуль index в котором возникает эта проблема?  а две звездочки после 0 - это только двузначные числа или трехзначные (четырех) тоже сюда подпадают?

---

Алексей Смирновв,

Не нужны, пропишите как я описал выше, этого достаточно.

---

Добрый день!

К сожалению, не это не помогает( Ниже принт скрин с сегодняшним 4.05.2017 обходом страниц. В поиске появились 3 дубля.

Может есть еще какой нибудь вариант?

С уважением, Алексей.

---

Алексей Смирновв,

Ссылки подобного вида запрещены к индексации http://joxi.ru/BA0GW9NHLZVg2y ждите, не все сразу, робот определит запрет и начнет выкидывать эти страницы, нужно подождать так как ничего не делается за несколько минут или дней.

---

Хорошо, спасибо вам большое!