DmitryShustov: Хорошо бы в той версии что я купил при принудительной отмене парсинга сделать сохранение того что напарсилось... я до сих пор не могу отпарсить ничего более 15000 страниц )))
Тогда более логично поставить выбор глубины парсинга. В результате должен ещё создаваться лог файл с просканеными урлами, чтоб прога в следующий заход проходила только новые. Иначе говоря сканы разбить на этапы, кратно например 10000 страниц.
У меня такая же проблема была с соседкой снизу лет 15 назад. Думал над разными вариантами, но в итоге забил, так как сомневался, что сигнал нужной мощности, чтобы спалить центр пробьёт железо-бетонные перекрытия не рассеиваясь. Что-то подобное, что нужно ТС видел в одном из номеров Хакера.
P.S. Сейчас нашёл. Если ТС нужно, пусть пишет, кину линк. Отправил в личку.
Всё таки вы уверены, что это из-за СМС, а не из-за контента? Находка я так понял очень жёстко относится к дубляжу. А на саты идёт в основном: копипаст, размноженный текст и скан. При чём при удалении сайта из индекса, скорее всего некоторое время его контент ещё доступен для внутреннего сравнения на уникальность. Это касается скана. И вообще я думаю робот сможет определить скан это или нет, если такая задача будет поставлена. Про копипаст - можно не говорить и так всё ясно. А размноженный, к сожалению при больших коэффициентах размножения начинает частично дублироваться. Во всех случаях бан. Есть ли пример вылета проектов на высококачественном рерайте или живом тексте, на доменах .ru .com .org?
mumur: Очень милый пятикласснег-лагерный волк или хто у них там по совместительству:
/ru/forum/265726 Не жгун, конечно, но способности есть.
Я думал, свалит с форума навсегда - ан нет, появился в пелвисовском топеге про кризис. Попробую спровоцировать на новые "блатные" беседы :)
SSinyak: То есть, по вашему мнению, если статья вреда, в принципе, не несёт, но вам лично она не нравится по каким-либо причинам, то это повод "давать в репу" её автору?
Я на этом форуме недавно, но просто по-человеческим меркам: возникают в словах таких людей, как pelvis и Str256 некие противоречия. "И ничего страшного, но тема "не туда" или не так написана - а давайте ему репутацию за это понизим!?" Не примите как личное оскорбление, но когда мнение человека критикуется, это одно, а описанное выше действие - совсем другое.
Я нигде такого не писал, окститесь:) Репутация не от цифр зависит, об этом написано множество раз. Возражение по статье я высказал. Вместо того, чтобы обсудить его конструктивно, её автор полез в бутылку.
Unlimit: Str256. Вы бы лучше вместо стёба, конструктивно написали бы свои претензии в личку! А то один господин отписавшийся в этом топике, сказал, что я не достоин писать ему в личку. Я так понял потому что репа не та.
Почти все поначалу в минусах ходили. Смысл в личку - идёт рабочее обсуждение. Вам надо было перед написанием статьи поднять аналогичные темы и сделать некий свод. А так никакого вреда от статьи нет. Скажите, вы что ожидали, что без возражений обойдётся?
Вот выдержка из правил:
Не следует устраивать дискуссию на тему несовпадения чьего-то личного мнения с Вашим. Не следует также обижаться по поводу Вашей неправоты. Если Вы желаете всегда оставаться правым, просто не участвуйте в дискуссиях.
Вот почитайте, интересная ветка: /ru/forum/178865
Хорошо бы в той версии что я купил при принудительной отмене парсинга сделать сохранение того что напарсилось... я до сих пор не могу отпарсить ничего более 15000 страниц )))
Тогда более логично поставить выбор глубины парсинга. В результате должен ещё создаваться лог файл с просканеными урлами, чтоб прога в следующий заход проходила только новые. Иначе говоря сканы разбить на этапы, кратно например 10000 страниц.
Может это будет интересно: http://www.guarantee.ru/Default.aspx?tabid=129
У меня такая же проблема была с соседкой снизу лет 15 назад. Думал над разными вариантами, но в итоге забил, так как сомневался, что сигнал нужной мощности, чтобы спалить центр пробьёт железо-бетонные перекрытия не рассеиваясь. Что-то подобное, что нужно ТС видел в одном из номеров Хакера.
P.S. Сейчас нашёл. Если ТС нужно, пусть пишет, кину линк. Отправил в личку.
Всё таки вы уверены, что это из-за СМС, а не из-за контента? Находка я так понял очень жёстко относится к дубляжу. А на саты идёт в основном: копипаст, размноженный текст и скан. При чём при удалении сайта из индекса, скорее всего некоторое время его контент ещё доступен для внутреннего сравнения на уникальность. Это касается скана. И вообще я думаю робот сможет определить скан это или нет, если такая задача будет поставлена. Про копипаст - можно не говорить и так всё ясно. А размноженный, к сожалению при больших коэффициентах размножения начинает частично дублироваться. Во всех случаях бан. Есть ли пример вылета проектов на высококачественном рерайте или живом тексте, на доменах .ru .com .org?
Очень милый пятикласснег-лагерный волк или хто у них там по совместительству:
/ru/forum/265726
Не жгун, конечно, но способности есть.
Я думал, свалит с форума навсегда - ан нет, появился в пелвисовском топеге про кризис. Попробую спровоцировать на новые "блатные" беседы :)
Он же вроде уже в Списке: /ru/forum/comment/3659308
Неее мне нравится эта фраза:
Очень похоже на отжиг.
Кстати а как это уточнить слова без минус слов?
Использовать не однословные ключевики, а многословные. Количество минус-слов резко уменьшится.
Например если я введу слово "кондиционер", то минус-слов будет много, а если "сервисное обслуживание кондиционеров chofu", то их просто нет.
То есть, по вашему мнению, если статья вреда, в принципе, не несёт, но вам лично она не нравится по каким-либо причинам, то это повод "давать в репу" её автору?
Я на этом форуме недавно, но просто по-человеческим меркам: возникают в словах таких людей, как pelvis и Str256 некие противоречия. "И ничего страшного, но тема "не туда" или не так написана - а давайте ему репутацию за это понизим!?" Не примите как личное оскорбление, но когда мнение человека критикуется, это одно, а описанное выше действие - совсем другое.
Я нигде такого не писал, окститесь:) Репутация не от цифр зависит, об этом написано множество раз. Возражение по статье я высказал. Вместо того, чтобы обсудить его конструктивно, её автор полез в бутылку.
P.S. С Пелвисом прошу не смешивать.
Str256. Вы бы лучше вместо стёба, конструктивно написали бы свои претензии в личку! А то один господин отписавшийся в этом топике, сказал, что я не достоин писать ему в личку. Я так понял потому что репа не та.
Почти все поначалу в минусах ходили. Смысл в личку - идёт рабочее обсуждение. Вам надо было перед написанием статьи поднять аналогичные темы и сделать некий свод. А так никакого вреда от статьи нет. Скажите, вы что ожидали, что без возражений обойдётся?
Вот выдержка из правил: