mark3000: В принципе да, очень большой объем достаточно сложен в просчете, так как здесь не просто получаются страницы, а просчитываются все получаемые и передаваемые веса между страницами (если не учитывать все остальные параметры). При тестировании программы сайты были до 5000 страниц, поэтому больший объем не проверялся.
ну считайте, что тест проведен... )
Идеальная среда для работы это html сайт до 1000 страниц.
Если дадите ключ на 10 дней, потестирую на сайте с 6 тыс страниц )
После нажатия на кнопку "стоп" программа "переваривает" все полученные данные, Если данных очень много то останавливается не сразу. Все зависит от объема.
Ну.. после нажатия на кнопку стоп с 7 тыс спарсенных страниц я ждала сутки - ничего не произошло. Таки хотелось бы иметь представление о том, чем занимается программа ) Хотя это и без меня уже сказали )
И насчет программы Erida2... Тоже не смогла потестировать, так как интерфейс программы весь съехал. И не сказать, чтобы у меня было сильно нестандартное разрешение на ноуте - 1280...
убрала названные вами галки, на сей раз парсинг дошел до 9000 страниц ))) в индексе яндекса больше 40 тыс страниц... я так понимаю, ваша программа не для таких сайтов )
только одно скажите, после того, как я жму кнопку "стоп", оно хоть должно обсчитывать веса? ))
И хотела бы оценить программу, да пока никак не выходит: парсинг доходит до 7 тыс страниц и виснет. При этом программа занимает оголо 1,4 гб оперативы. И резерв оперативки есть - у меня 4 гб стоит, но дальше 7 тыс страниц не идет :(
Останавливаю через кнопку "стоп" и дальше тишина. Колонки весов пустые. Она после стопа что-то считает или тупо висит в памяти?
хрень какая-то. в вебмастере количество ссылающихся сайтов прыгает от нормального до в десять раз меньшего. при этом количество ссылок не меняется )))))))))))))))) ИМХО зря потерли тему про ап )))
или это глюки после "слета таблиц маршрутизации"? ;)
CatRegist: Самое забавное регулярно наблюдать в выдаче после десятого места: Из результатов поиска исключены слишком похожие ответы. Показать всё без исключения. Это совсем недавно что то у них ёкнуло )
да. при этом выдача может принять традиционный вид с переходом по страницам, и тогда будет 16 млн. документов, а может принять вид "показать все без исключения", и тогда количество документов, которое будет показано, 39 тыс. пробую обновлять страницу, у меня примерно каждый 8-10 показ выдает второй вариант, причем рандомом. 😕
Mr. Pinky: чувствую зря я все это затеял...
Имеется в виду такие способы, как например: регистрация аккаунта и создание ссылки в профиле.
ТАким образом форуму ПЛЮС, т.к. еще человек зарегестрировался и нам т.к. есть ссылка и нигде нет никакого мусора.
ну конечно-конечно. ссылочка нахаляву от мертвых душ, которые сайту принесли ровно 1 просмотр и никак не сконвертились - это не мусор, аха. регулярно чищу базу пользователей от таких умников как вы, которые на детском сайте постят немешающие ссылки на гемблинг и порноресурсы. 😡
тс, сайтам нужны ЖИВЫЕ пользователи. руками раскручивайте, ведите свои топики на профильных форумах, давайте ценные комментарии, а ссылку ставьте в подпись, и будет вам счастье в виде целевого трафика.
Яндекс сменил формат выдачи, не работает по нему... Ээх :)
Скажите, люди добрые, кто черех xml проверяет? Делаю все, как указано на сайте разработчика (отсекаю кусок урла с xml, начиная со слова user и вставляю в соответсвующее поле формы, прога пишет сбой соединения...
В принципе да, очень большой объем достаточно сложен в просчете, так как здесь не просто получаются страницы, а просчитываются все получаемые и передаваемые веса между страницами (если не учитывать все остальные параметры). При тестировании программы сайты были до 5000 страниц, поэтому больший объем не проверялся.
ну считайте, что тест проведен... )
Если дадите ключ на 10 дней, потестирую на сайте с 6 тыс страниц )
Ну.. после нажатия на кнопку стоп с 7 тыс спарсенных страниц я ждала сутки - ничего не произошло. Таки хотелось бы иметь представление о том, чем занимается программа ) Хотя это и без меня уже сказали )
И насчет программы Erida2... Тоже не смогла потестировать, так как интерфейс программы весь съехал. И не сказать, чтобы у меня было сильно нестандартное разрешение на ноуте - 1280...
убрала названные вами галки, на сей раз парсинг дошел до 9000 страниц ))) в индексе яндекса больше 40 тыс страниц... я так понимаю, ваша программа не для таких сайтов )
только одно скажите, после того, как я жму кнопку "стоп", оно хоть должно обсчитывать веса? ))
И хотела бы оценить программу, да пока никак не выходит: парсинг доходит до 7 тыс страниц и виснет. При этом программа занимает оголо 1,4 гб оперативы. И резерв оперативки есть - у меня 4 гб стоит, но дальше 7 тыс страниц не идет :(
Останавливаю через кнопку "стоп" и дальше тишина. Колонки весов пустые. Она после стопа что-то считает или тупо висит в памяти?
хрень какая-то. в вебмастере количество ссылающихся сайтов прыгает от нормального до в десять раз меньшего. при этом количество ссылок не меняется )))))))))))))))) ИМХО зря потерли тему про ап )))
или это глюки после "слета таблиц маршрутизации"? ;)
а рдс-бар данные собирает автоматом или по запросу?
Самое забавное регулярно наблюдать в выдаче после десятого места: Из результатов поиска исключены слишком похожие ответы. Показать всё без исключения.
Это совсем недавно что то у них ёкнуло )
Ну например по вполне себе ничего конвертабельного и трафного:
http://yandex.ru/yandsearch?text=%D0%B1%D0%B5%D0%B3%D0%BE%D0%B2%D0%B0%D1%8F%20%D0%B4%D0%BE%D1%80%D0%BE%D0%B6%D0%BA%D0%B0%20%D0%B4%D0%BB%D1%8F%20%D0%B4%D0%BE%D0%BC%D0%B0%20&lr=213 А так примеров масса...
да. при этом выдача может принять традиционный вид с переходом по страницам, и тогда будет 16 млн. документов, а может принять вид "показать все без исключения", и тогда количество документов, которое будет показано, 39 тыс. пробую обновлять страницу, у меня примерно каждый 8-10 показ выдает второй вариант, причем рандомом. 😕
что это? почему это?...
Neo79, у меня один ЯК 110-->30. Работы велись, никаких предпоссылок не было и тут....ппц.
на аналогично, с 70 на 20.
чувствую зря я все это затеял...
Имеется в виду такие способы, как например: регистрация аккаунта и создание ссылки в профиле.
ТАким образом форуму ПЛЮС, т.к. еще человек зарегестрировался и нам т.к. есть ссылка и нигде нет никакого мусора.
ну конечно-конечно. ссылочка нахаляву от мертвых душ, которые сайту принесли ровно 1 просмотр и никак не сконвертились - это не мусор, аха. регулярно чищу базу пользователей от таких умников как вы, которые на детском сайте постят немешающие ссылки на гемблинг и порноресурсы. 😡
тс, сайтам нужны ЖИВЫЕ пользователи. руками раскручивайте, ведите свои топики на профильных форумах, давайте ценные комментарии, а ссылку ставьте в подпись, и будет вам счастье в виде целевого трафика.
вот не надо грязи, автор сегодня выпустил новую версию.
http://sespider.ru/2010/11/05/eksperimentalnaya-versiya-sespider-070/
спасибо за наводку, но не стоит в этом топике рекламировать чужие программы, некрасиво выглядит.
Яндекс сменил формат выдачи, не работает по нему... Ээх :)
Скажите, люди добрые, кто черех xml проверяет? Делаю все, как указано на сайте разработчика (отсекаю кусок урла с xml, начиная со слова user и вставляю в соответсвующее поле формы, прога пишет сбой соединения...