как настроить robot.txt

голоса: 0
Как настроить робот.тхт для доски объявления что бы робот имел доступ ко всем разделам и категориям а так же материалам
| Автор: | Категория: SEO
  • > Почему sitemap не показывает страницы доски объявлений , а конкретнее не отображаются категории и разделы
  • >> В карте формируются ссылки лишь на страници материалов, но не категорий, ссылки на категориии  разделы робот сам подхватывает и индексирует по мере обнаружения.

Ответов: 1

голоса: 0
 
Лучший ответ
Стандартно он уже имеет везде доступ куда нужно, вам дополнительно ничего настраивать не нужно.
| Автор:
Выбор ответа лучшим | | Автор: webanet
...