ще бы каким-то образом отсеивать такие комментарии: "55555555555555555555555555555555555555555555555555". Вот например если больше 3-х одинаковых символов идет последовательно, то пропускать этот коммент. (в русском только слово: "длинношеее" имеет 3 одинаковых буквы подряд)
vlad00777: Видать активно тестят форумчане :)
Не знаю насколько верно, но мне кажется, если на 1-ой странице нет комментариев, значит они закрыты и дальше парсить нет смысла, а у вас скрипт и дальше работает и естественно ничего не находит.
П.с кстати, когда комментариев нет, не пишет что их ноль, а просто:
"Найдено комментариев: "
********ка это остаток роскоши, просто с ней работаю по другим проектам, а тут отразилось хехех.
закрыты и дальше парсить нет смысла, а у вас скрипт и дальше работает и естественно ничего не находит.
Уже всё ок :)
---------- Добавлено 05.07.2012 в 03:12 ----------
vlad00777: И вижу что комментарии дублируются, причем какие по 2, какие по 7 раз. Делайте проверку на дубли.
Сделал :)
Обновление:
[Исправлено] Перенесены некоторые настройки
[Добавлено] Функция "Убрать спам"
[Добавлено] Корректировать повторяющие символы (АААА => А)
Корректировкой кстати, можно добиться не большой уникальности :)
Не для кого а скорее от кого 🍾
От школоло.
Ой да ладно? Те кто читать не умеет?
http://www.google.ru/search?client=opera&rls=ru&q=PHP+%D0%BA%D0%B0%D0%BA+%D1%81%D0%BF%D0%B0%D1%80%D1%81%D0%B8%D1%82%D1%8C+%D0%B8%D0%BD%D1%84%D0%BE%D1%80%D0%BC%D0%B0%D1%86%D0%B8%D1%8E?&sourceid=opera&ie=utf-8&oe=utf-8#hl=ru&newwindow=1&client=opera&hs=jP1&rls=ru&sa=X&ei=1jP1T-q1L8vo-gb8p6DsBg&ved=0CD8QvwUoAQ&q=PHP+%D0%BA%D0%B0%D0%BA+%D0%BF%D0%B0%D1%80%D1%81%D0%B8%D1%82%D1%8C+%D0%B8%D0%BD%D1%84%D0%BE%D1%80%D0%BC%D0%B0%D1%86%D0%B8%D1%8E%3F&spell=1&bav=on.2,or.r_gc.r_pw.,cf.osb&fp=5fe6d7c38ed266a2&biw=1920&bih=932
Говно. Любой серверный парсер, возьмёт ЛЮБУЮ информацию с 1000 ваших страниц.
А отключение исполнение JS на странице, даст мне лично возможность скопировать всё, что мне надо.
Для кого защита?
Они находяться ЗА пределом 2-х страниц, а в демо версии там именно такое ограничение.
Вверху сегодняшняя дата и "Показать".
Не могу найти эти комментарии к видео. Хотел посмотреть это на ютубе дубли или в программе.
Ок. Посмотрю уже завтра. Сейчас на сервере обновляется mysql до 5,5 версии.
---------- Добавлено 05.07.2012 в 03:25 ----------
Вверху сегодняшняя дата и "Показать".
Не могу найти эти комментарии к видео. Хотел посмотреть это на ютубе дубли или в программе.
Мне бы само название комментария, как он звучит :)
Вообще дублировать не может физически, это значит к видео идут дубли.
Для них ваше: "Мой сайт в топ по 100 ключам" = "Усраться, какое достижение )))"
Видать активно тестят форумчане :)
Не знаю насколько верно, но мне кажется, если на 1-ой странице нет комментариев, значит они закрыты и дальше парсить нет смысла, а у вас скрипт и дальше работает и естественно ничего не находит.
П.с кстати, когда комментариев нет, не пишет что их ноль, а просто:
"Найдено комментариев: "
********ка это остаток роскоши, просто с ней работаю по другим проектам, а тут отразилось хехех.
Уже всё ок :)
---------- Добавлено 05.07.2012 в 03:12 ----------
И вижу что комментарии дублируются, причем какие по 2, какие по 7 раз. Делайте проверку на дубли.
В каком отчёте и какие именно дублируются?
1 палочка = 1 коммент :)
Это пока для теста, смотреть, что вообще делает скрипт.
Уже всё поправлено.
Сделано. Так же добавил, чтобы урл был ссылкой. Удобнее так сказать :)
Кому интересно: http://www.youtube.com/watch?v=c00jMAM55kc
Всё по полочкам расставит, что и зачем надо и что делает коллайдер.
Пойди курни.
Не понял? В чём юмор?