Анализ robot.txt

  

1 комментарий: Анализ robot.txt

  1. m_posmag говорит:

    блокирует доступ ко всему сайту для бота Yahoo! Slurp
    для остальных ботов все разрешено

Комментарии запрещены.