Подскажите правильный robots.txt

голоса: 0
Здравствуйте! Подскажите правильный robots?  Как заблокировать все страницы кроме главной?  Как сделать чтобы удалить старые страницы из поиска yandex.  Спасибо
| Автор: | Категория: SEO
Изменение категории | | Автор: webanet

Ответов: 1

голоса: 0

robots не является надежным методом. если надо исключить из поиска и запретить индексирование всех страниц кроме главной, пропишите на ненужных страницах в секции head

 <meta name="robots" content="none" />
| Автор:
везде убрать и файл robots.txt удалить и в вебмастере запросить переобход главной и ждать и больше ничего не трогать
webanet,
Огромное спасибо.  а категории не делать переобход?
можно дать и категории но после полного запрета быстро точно не будет
webanet,
Огромное спасибо.  Как я понимаю. Если я меняю сайт а именно категории - то всегда отправлять на переобход?
да можно конечно на переобход, но больше не надо полностью запрещать индексацию
...