Ахтунг! Обман оптимизаторов!

Просто сформулируйте цель программисту.

А цель - сравнить реальные страницы на сайте с их сохраненными копиями, выявить таким образом клоакинг Яндекса. Учесть, что все ссылки совпасть и не должны - страницы индексируются не мгновенно.

Итого:

• Берем с сайта десяток страниц 1-2 уровня
• Ищем их в Яндексе, достаем ссылку на сохраненную копию
• Если сайт не проиндексирован, помечает как отложенный, переходим к следующему.
• Загружаем сохраненную копию
• Парсим обе версии страницы, ищем ссылки из реальной версии на сохраненной копии.
• Если хотя бы часть нашлась, помечаем сайт как порядочный. Если нет - помечаем как клоаченный. Клоаченные желательно потом просмотреть и вручную, но можно сразу в ГБЛ

Я бы запускал такой скриптик кроном раз в пару минут. По одному сайту за запуск.

есть, но коллеги предпочитают самописный, т.к. единого мнения в определении алгоритмов нету :).

Пишешь в саппорт Яндекса, обрисовываешь ситуацию, за клоакинг наказывают очень строго.

1. А какой может быть алгоритм на проверку клоакинга? нужно сделать к сайту запрос с IP из рабочего диапазона яшки)). Если осилите, то проблема решена. Сам скрипт то не особо сложный... Основная проблема с IP...

2. Плюс яшке сообщить о клоакинге... Поверьте они там не тупые и умеют пользоваться проксями... Правда, деньги ваши всё равно будут уже потрачены, но зато другим любителям клоаки неповадно будет.

Подскажете ссылочку?

Vasiliy12345, не подскажу, т.к. сам человека нанимал и он писал по моему техзаданию. Те, что существуют в открытой продаже, к сожалению, учитывают очень небольшое количество факторов.

За клоакинг наказывают строго, когда этот клоакинг направлен на то, чтобы повлиять на результаты выдачи. а если клоакинг направлен на зарабатывание денег, а на результаты выдачи как раз не влияет - даже наоборот! - то могут и похвалить )

Vasiliy12345 добавил 06.05.2008 в 14:14

Как вариант - вполне может сработать. Всё же вероятно не я первый с таким сталкиваюсь, и кто-то уже написал что-то подобное. Если кто нибудь знает - скиньте плз ссылочку.

В топике еще был один вопрос - на тему того, как определять естественность ссылок. По нему есть что нибудь?

Осталось договориться с Садовским, чтобы выделил местечко на одном из серверов Яндекса 😂

Ну вы скорее всего уже не про обман оптимизаторов, а про проверку на работоспособность ссылки... Месяцок-то всё равно должен пройти, чтобы ваша прога выявила неиндексируемость ссылки... Основная задача ТС (определить работоспособность ссылки в день её размещения на сайте!) решения, скорее всего не находит.

определить работоспособность ссылки в день её размещения на сайте!:2cents:

- Эх, за такую прогу можно было бы много денег выложить...

Ну, в день размещения - этого ни одна прога не скажет :). По конкурентам можно вычислить, но все равно погрешность будет и не факт, что ссылка сработавшая у конкурента, через месяц сработает у нас.