Question

Зачем в робот тхт стоит данная запись?

Allow: /stat/dspixel

какой в ней смысл?

Answer 1

Это открытие доступа для роботов поисковых систем к системному скрипту статистики, можете прочесть расшифровку роботса вот здесь.

Answer 2

Allow: /stat/dspixel - это разрешить доступ к системному скрипту статистики

Comments

какой в ней смысл? зачар роботу индексировать эту страницу?

---

Учитывать количество посещений сайта и узнавать о его "известности", "распространенности".