Ежедневное электронное издание о российском Интернете
Как изменить скорость сканирования сайта роботом "Яндекса"
Опубликовано: 25.07.2008, 17:16 V-phantom
Тематика:
Пользуясь специальной инструкцией Crawl-delay в файле robots.txt, веб-мастеры могут менять продолжительность перерывов, которые делает поисковый робот "Яндекса" между запросами к серверу. Это может оказаться полезным в том случае, если "паук" создает чрезмерную нагрузку на сайт, и его нео... Читать оригинал новости
- 25.07.2008 в 17:16
- 32 голоса
- одобрить
- утопить
- 4 комментария
Заработай деньги
на своём сайте!
на своём сайте!
Новый сервис монетизации СМИ и блогов.
Приглашаем сайты к бета-тестированию →
Новости СМИ2
Обсуждаемые новости
Партнёры
 |
 |
 |
 |
 |
|
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
25.07.2008, 17:55 это спам!
25.07.2008, 23:55 это спам!
26.07.2008, 20:08 это спам!
26.07.2008, 20:59 это спам!