Нужно ли вручную создавать Robots.txt и Sitemap?

голоса: 0
В файловом менеджере не видны Robots.txt и Sitemap. Их нужно создавать самостоятельно?
Адрес сайта fotosestroretsk.ucoz.site
| Автор: | Категория: SEO
Изменение категории | | Автор: webanet

Ответов: 2

Голоса: +1
 
Лучший ответ
Эти файлы создавать вручную не надо. Система подгружает оптимальный файл robots.txt  и карты сайта есть по умолчанию. Файл robots.txt появится в файловом менеджере только после того как вы зальете свой. До этого он недоступен в файловом менеджере для правок. Но лучше свой не заливать со своими правками, если нет опыта

Адреса карт сайта всегда доступны в панели управления - Поиск по сайту - Адреса SITEMAP файлов.

Читайте подробно про карту сайта http://forum.ucoz.ru/forum/21-38683-1
| Автор:
Выбор ответа лучшим | | Автор: Роман Беляков

То есть лучше автоматический  http://fotosestroretsk.ru/robots.txt положить в корень ФМ вручную?

Роман Беляков,
Если вы его не будете редактировать и менять чего не знаете, можно и вручную.

Залейте этот вариант

User-agent: *
Allow: /*?page
Allow: /*?ref=
Disallow: /*?
Disallow: /stat/
Disallow: /index/1
Disallow: /index/3
Disallow: /register
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /index/sub/
Disallow: /panel/
Disallow: /admin/
Disallow: /informer/
Disallow: /secure/
Disallow: /poll/
Disallow: /search/
Disallow: /abnl/
Disallow: /*_escaped_fragment_=
Disallow: /*-*-*-*-987$
Disallow: /*0-*-0-17$
Disallow: /*-0-0-

Host:fotosestroretsk.ru

Sitemap: http://fotosestroretsk.ru/sitemap.xml
Sitemap: http://fotosestroretsk.ru/sitemap-forum.xml
webanet,

Стандартный отличается от вашего:

1. Наличием строки Allow: /stat/dspixel – почему в вашем примере нет?

2. Отсутствием строки Host:fotosestroretsk.ru – это мне понятно для чего, нашел в других вопросах.

1 устаревшая неактуальная строчка

2 нужно, потому что вы недавно прикрепили домен. читайте https://yandex.ru/support/webmaster/controlling-robot/robots-txt.xml#host
webanet,
Спасибо за информацию!
Yuri_Geruk,
Спасибо за помощь!
Голоса: +1

Не нужно, перейдите по ссылкам:

  1. http://fotosestroretsk.ru/robots.txt
  2. http://fotosestroretsk.ru/sitemap.xml

после файлы должны создаться автоматически и отобразиться на фтп сайта в файловом менеджере.

| Автор:

Sitemap отобразился, а Robots.txt нет.

Роман Беляков,

Если не терпится, создайте на компьютере файл с именем robots текстового формата и перекопируйте в него содержимое с файла http://fotosestroretsk.ru/robots.txt после загрузите в корень файлового менеджера, корень, это то что вы видите сразу при открытии файлового менеджера не переходя в другие папки.

...