Оптимальное значение директивы Crawl-delay

S
На сайте с 17.07.2015
Offline
2
844

Хочу использовать директиву Crawl-delay для снижения нагрузки на сайт.

Подскажите, какое значение директивы будет оптимальным?

Р
На сайте с 07.02.2013
Offline
165
#1

По логике при задании Crawl-delay следует отталкиваться от параметров сервера и нагрузки, создаваемой роботом.

The WishMaster
На сайте с 29.09.2005
Offline
2543
#2

Не факт, что роботы будут ее соблюдать.

Пешу текста дешыго! Тематики - туризм, СЕО, творчество, кулинария, шизотерика :)
TOBBOT
На сайте с 04.11.2014
Offline
41
#3

там дробных значений нет, а значит 1 хватит за глаза.

Инструменты интернет-маркетинга - JLAB (http://jlab.io/) Бесплатная автоматизация с программой TOBBOT (http://tobbot.com/)
The WishMaster
На сайте с 29.09.2005
Offline
2543
#4

Может, просто сервер получше стоит взять?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий