keira

Рейтинг
64
Регистрация
12.12.2005
mark3000:
В принципе да, очень большой объем достаточно сложен в просчете, так как здесь не просто получаются страницы, а просчитываются все получаемые и передаваемые веса между страницами (если не учитывать все остальные параметры). При тестировании программы сайты были до 5000 страниц, поэтому больший объем не проверялся.

ну считайте, что тест проведен... )

Идеальная среда для работы это html сайт до 1000 страниц.

Если дадите ключ на 10 дней, потестирую на сайте с 6 тыс страниц )

После нажатия на кнопку "стоп" программа "переваривает" все полученные данные, Если данных очень много то останавливается не сразу. Все зависит от объема.

Ну.. после нажатия на кнопку стоп с 7 тыс спарсенных страниц я ждала сутки - ничего не произошло. Таки хотелось бы иметь представление о том, чем занимается программа ) Хотя это и без меня уже сказали )

И насчет программы Erida2... Тоже не смогла потестировать, так как интерфейс программы весь съехал. И не сказать, чтобы у меня было сильно нестандартное разрешение на ноуте - 1280...

убрала названные вами галки, на сей раз парсинг дошел до 9000 страниц ))) в индексе яндекса больше 40 тыс страниц... я так понимаю, ваша программа не для таких сайтов )

только одно скажите, после того, как я жму кнопку "стоп", оно хоть должно обсчитывать веса? ))

И хотела бы оценить программу, да пока никак не выходит: парсинг доходит до 7 тыс страниц и виснет. При этом программа занимает оголо 1,4 гб оперативы. И резерв оперативки есть - у меня 4 гб стоит, но дальше 7 тыс страниц не идет :(

Останавливаю через кнопку "стоп" и дальше тишина. Колонки весов пустые. Она после стопа что-то считает или тупо висит в памяти?

хрень какая-то. в вебмастере количество ссылающихся сайтов прыгает от нормального до в десять раз меньшего. при этом количество ссылок не меняется )))))))))))))))) ИМХО зря потерли тему про ап )))

или это глюки после "слета таблиц маршрутизации"? ;)

а рдс-бар данные собирает автоматом или по запросу?

CatRegist:
Самое забавное регулярно наблюдать в выдаче после десятого места: Из результатов поиска исключены слишком похожие ответы. Показать всё без исключения.
Это совсем недавно что то у них ёкнуло )

Ну например по вполне себе ничего конвертабельного и трафного:
http://yandex.ru/yandsearch?text=%D0%B1%D0%B5%D0%B3%D0%BE%D0%B2%D0%B0%D1%8F%20%D0%B4%D0%BE%D1%80%D0%BE%D0%B6%D0%BA%D0%B0%20%D0%B4%D0%BB%D1%8F%20%D0%B4%D0%BE%D0%BC%D0%B0%20&lr=213 А так примеров масса...

да. при этом выдача может принять традиционный вид с переходом по страницам, и тогда будет 16 млн. документов, а может принять вид "показать все без исключения", и тогда количество документов, которое будет показано, 39 тыс. пробую обновлять страницу, у меня примерно каждый 8-10 показ выдает второй вариант, причем рандомом. 😕

что это? почему это?...

freemangamer:
Neo79, у меня один ЯК 110-->30. Работы велись, никаких предпоссылок не было и тут....ппц.

на аналогично, с 70 на 20.

Mr. Pinky:
чувствую зря я все это затеял...
Имеется в виду такие способы, как например: регистрация аккаунта и создание ссылки в профиле.
ТАким образом форуму ПЛЮС, т.к. еще человек зарегестрировался и нам т.к. есть ссылка и нигде нет никакого мусора.

ну конечно-конечно. ссылочка нахаляву от мертвых душ, которые сайту принесли ровно 1 просмотр и никак не сконвертились - это не мусор, аха. регулярно чищу базу пользователей от таких умников как вы, которые на детском сайте постят немешающие ссылки на гемблинг и порноресурсы. 😡

тс, сайтам нужны ЖИВЫЕ пользователи. руками раскручивайте, ведите свои топики на профильных форумах, давайте ценные комментарии, а ссылку ставьте в подпись, и будет вам счастье в виде целевого трафика.

вот не надо грязи, автор сегодня выпустил новую версию.

http://sespider.ru/2010/11/05/eksperimentalnaya-versiya-sespider-070/

спасибо за наводку, но не стоит в этом топике рекламировать чужие программы, некрасиво выглядит.

Яндекс сменил формат выдачи, не работает по нему... Ээх :)

Скажите, люди добрые, кто черех xml проверяет? Делаю все, как указано на сайте разработчика (отсекаю кусок урла с xml, начиная со слова user и вставляю в соответсвующее поле формы, прога пишет сбой соединения...

Всего: 246