- 06, Oct 2013
- #1
Помогите, пожалуйста, уяснить естественность GET запросов робота Yandex.
Дело в том, что запрашивает главную страницу он у меня всегда очередью из нескольких запросов:
Дело в том, что запрашивает главную страницу он у меня всегда очередью из нескольких запросов:
178.154.210.250 - - [06/Oct/2013:21:41:00 +0400] "GET /robots.txt HTTP/1.0" 200 1451 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
178.154.210.250 - - [06/Oct/2013:21:41:03 +0400] "GET / HTTP/1.0" 200 18358 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
178.154.210.250 - - [06/Oct/2013:21:41:02 +0400] "GET / HTTP/1.0" 200 18350 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
178.154.210.250 - - [06/Oct/2013:21:41:15 +0400] "GET / HTTP/1.0" 200 18188 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
178.154.210.250 - - [06/Oct/2013:21:41:16 +0400] "GET / HTTP/1.0" 200 18192 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
Это только у меня так, или такое явление нормально? Волнуюсь, чтобы с настройками моего сервера проблем не было.