di_max

di_max
Рейтинг
262
Регистрация
27.12.2006
Copra:
дайте наводку хоть на какой нить документ...

- На вотку - не подаю! ;)

Margo и BDJoker дал ссылки, курить их до просвятления.

Слава Шевцов:
Спасибо за ключевики для поиска - предел 1100 штук.

А 10% запаса прочности? На фсякей... ;)

С учетом последней катаклизмы, робот запрашивает страницы, по которым еще в октябре получил 404, возможен вариант: - Платон "смотрит" не сам сайт, а "сохраненную копию" неизвестно какой давности...

Имхо, безусловно.

Independence:
... и "что рано или поздно придется прибить дурачка" за такие проделки?

... что с успехом сделано.;) Несколько лет назад, как первый раз выкинул фортель, так сразу.

Слава Шевцов:
Сколько ссылок можно положить на одну страницы карты? Все 4К съест? Или как Гугл - только первые 100?

Где-то по форуму пробегал ответ Платона с точной цифрой.

(Может Кашарин в коллекцию положил?)

На вскидку - 1000 слопает Яндекс...

vovchik69:
А как было-бы логично прописать данный параметр (Last-Modified) или не писать вообще?

А что означает параметр Last-Modified по RFC?

Вот от этого и стоит оттолкиваться, а не фантазий на вольную тему.;)

Safovsky:
В последнее время робот ходит очень не стабилько, как раз последние 2 недели, не парьтесь.

Сосет, робот, насосом без остановки. Что для меня - наблюдаемый факт.

Safovsky:
С какой стати?

С логической... Какие выводы сделает нормальный человек, если меняется Last-Modified, а контент - нет?

Забанить - это скорее нет. А вот понизить "приоритет" обхода сайта - это было бы логично...

SciFi:
Ну, собственно проблема только с Яндексом...

Это - не проблема. Это - следствие... От Вашего, извините, незнания. В часности - как настроить WEB-сервер ...

Без обидок.;)

Всего: 9522