Файл роботс тхт

голоса: 0

Подскажите, а можно закрыть эти страницы в роботс тхт http://c2n.me/3slOjv5 или это плохо будет для продвижения? По идее они не нужны...

Адрес сайта http://all-4droid.ru
Закрыто с пометкой: Вопрос решен!
| Автор: | Категория: SEO
Закрыт | | Автор: Yuri_Geruk

Ответов: 1

голоса: 0
 
Лучший ответ

Закрыть конечно можно, заменив в файле роботс директиву:

Allow: /*?page*

на:

Disallow: /*?page*

но стоит напомнить о следующем, страницы пагинации разрешены для индексации не просто так, а для того чтобы роботы поисковых систем имели беспрепятственный доступ к всем материалам сайта.

Если закрыть доступ и запретить индексацию страниц пагинации, для роботов будет проблема в корректном сканировании страниц сайта, что не есть хорошо, заставлять робота искать обходные пути дабы проиндексировать материалы вашего сайта.

| Автор:
Выбор ответа лучшим | | Автор: рома романов
Понятно, значит буду делать как Вы посоветовали в моем прошлом вопросе
...