А почему бы просто не добавить временное поле - маркер, который будет означать, что запись обработана и запускать обработку, например, по 1000 записей за раз....
Скрипт обработчика можно запускать ежесекундно банальным джаваскриптом... либо селф перезагрузка по завершению...
таким образом можна обрабатывать и очень большие таб.
Туристический по "Турции", 2006г. Контент на момент создания сайта был уник (все страницы). Но за годы существования его растащили на десятки сайтов. Ссылками не торговал. Вероятная причина, но в нее слабо верится, - незначительный спам в комментариях (без ссылок).
Сайт по работе и трудоустройству. Старый. Про уник говорить не приходится, в связи с его тематикой. Возможная причина - наличие малого процента объявлений по набору танцовщиц и прочих работников "сферы развлечений". Данные объявления удалил.
А почему бы просто не отловить IP парсера и не подбросить ему на съедение всякого мусорного контента?
Также, если сайт-парсер действительно выкладывает новые публикации практически одномоментно с тем, как их выкладываете вы, то возможно он их и не парсит вовсе, а просто, в реальном времени забирает вашу страницу, подменяет урлы и отдает как свою... в этом случае его словить и наказать будет проще простого.
А почему бы просто не добавить временное поле - маркер, который будет означать, что запись обработана и запускать обработку, например, по 1000 записей за раз....
Скрипт обработчика можно запускать ежесекундно банальным джаваскриптом... либо селф перезагрузка по завершению...
таким образом можна обрабатывать и очень большие таб.
Также вылетело в ноль 2 сайта.
Туристический по "Турции", 2006г. Контент на момент создания сайта был уник (все страницы). Но за годы существования его растащили на десятки сайтов. Ссылками не торговал. Вероятная причина, но в нее слабо верится, - незначительный спам в комментариях (без ссылок).
Сайт по работе и трудоустройству. Старый. Про уник говорить не приходится, в связи с его тематикой. Возможная причина - наличие малого процента объявлений по набору танцовщиц и прочих работников "сферы развлечений". Данные объявления удалил.
По обеим сайтам буду писать в службу поддержки.
А почему бы просто не отловить IP парсера и не подбросить ему на съедение всякого мусорного контента?
Также, если сайт-парсер действительно выкладывает новые публикации практически одномоментно с тем, как их выкладываете вы, то возможно он их и не парсит вовсе, а просто, в реальном времени забирает вашу страницу, подменяет урлы и отдает как свою... в этом случае его словить и наказать будет проще простого.
Также не совсем понял вопрос....
Если нужно определить IP пользователя, то скрипт в файле (99% взято с PhpMyAdmin)...
Буду первым...
http://bulletin-board.com.ua/
http://htmlbook.ru/faq/kak-izmenit-tsvet-teksta-i-fona-v-tekstovom-pole
а также может пригодиться http://htmlbook.ru/faq
потерто, ошибся...
Чтобы назвать примерную цену - нужно знать, что именно может программа. Как минимум, нужно больше примеров.
Кеш смотреть в текстовой версии или html? Просто если в текстовой смотреть, то бот ссылку не видит.😒
Смотреть "только текстовая версия"... касается Гугла (html версия подгружает скрипты и браузер их выполняет).
Я так понял, что это и требуется... чтобы бот ссылку не видел.
Ведь суть вопроса в том, как правильно распределить вес внутри сайта. Правильно?