InSAn

InSAn
Рейтинг
60
Регистрация
13.01.2003
Должность
adPRO, PROext, HINT, ITnews

А у меня на 2-х сайтах (был / упал / сегодня):

- 1600 / 550 / 600

- 1100 / 950 / 1200

Первый - имеет много ссылок с бесплатных хостингов, второй - с серьезных ресурсов

Да все он запрашивал - более 5 тыс страниц скушал.

И честно реферер выдавал, откуда пришел (а приходил со многих ресурсов)...

Жаль, что полный Юзер-Агент выбросил :(

В нем он давал ссылку на страницы сайта с описанием робота (вот только для чего он - так и не понял).

Создалось впечатление, что кто-то пытается собрать в БД все домены, которые найдет (по-крайней мере был приведен список посещенных доменов и отсортирован как по алфавиту, так и по какому-то своему критерию).

И часто это признак близящейся hack-атаки

Откуда такие сведения?

Этот робот проверяет страницы на совместимость стандартам

Ничего подобного.

Это робот, который обходит страницы, ищет на них ссылки на другие ресурсы и заносит имена доменов в свою базу, которая публикуется у них на сайте. И никакго отношения к W3.org он не имеет.

Аот только зачем ему такая коллекция?

Как писал Gosha

в случае поставленного вопроса "куда кликнут" - единставенная возможность проверить - провести тест.

О чем я говорил еще N топиков ранее :)

Как писал Gosha
тесты - вещь точная. Только выводы от интерпретации зависит.
А статистика - вещь просто неопровержимая. Если действительно интерсен вопрос - надо только исследование проводить

Вы сами себе противоречите.

Для сбора статистики проводятся исследования (тесты), на основе которых и делаются выводы.

Как писал matik
ИнСАн, у некоторых он упал в 5..6 раз такчто радуйся!
что всего в 3...

Ага! Я рад! :)

Значит, будем бороться...:D

А я в шоке!

По одному из ресурсов тИЦ был 1600, а сейчас - 550!😮

Как писал defresto
неуверен на 100%, но помойму гугл такие конструкции тоже кушает нормально:
site.com/content.php/param1/param2/
а дальше просто разбирать по ури

Ага. И на такой тоже PR показывает :)

Как писал wolf

Вообще, бывает такое, что фреш-бот на несколько дней перестает заглядывать на сайт.

В то-то и дело, что не на несколько дней, а почти на месяц...

Как писал UEvgeny


Всё намного проще.

Можно и проще :) Но простые решения - не для нас :D

А теперь вернемся к тому, с чего начинали.

Личный опыт - Гуглу так и выдавался некоторый ресурс.
Текст менялся, но незначительно (Приблизительно раз в три-четыре дня).

Под "незначительным изменением текста" я имел ввиду - неосновной текст, а второстепенный - была вставка заголовков из трех новостей.

Закончилось тем, что Гугл "обломался" на него наведываться.
Всего: 470