burunduk: stardg, суть в том что если на странице часть контента выводиться JS зачем его брать для анализа? пример отправил в личку
Хм... надо подумать такого я не ожидал...
stardg добавил 04.03.2009 в 08:08
Nelmak: :(Яндекс врет!!!😡 Вот скриншот проверки простого слова "мама".
[ATTACH]29473[/ATTACH]
Ну ладно! Первым двум еще можно поверить. А в Яндексе что? Слово "мама" встречается только в 37-ми местах???😂😂😂 А кликните по этой цифре - что будет???:D Точно не 37 ссылок покажет!!!:)
Да это косяк в следующем релизе будет исправлен - конечно же 37 млн. страниц
stardg добавил 04.03.2009 в 08:13
Nelmak: И еще, пока не забыл. При создании пассажей для проверки появляются лишние пробелы! Например, при вставке фразы "Систематические нарушения в работе компрессора" в проверку было отправлено следующее "Си стематические нарушен ия в работе комп рессора".
А можно узнать страничку откуда сей пассаж был взят? Может фраза в на страничке выглядет цельной, а реально там разметка какая?
stardg добавил 04.03.2009 в 08:19
Nelmak: Приехали!!! Гугл тоже заявил, что я робот!!!:(
Nelmak добавил 26.02.2009 в 11:46 Кстати, вы не могли бы поподробнее объяснить - как сделать так, чтобы поисковик думал, что запросы идут с разных IP? Вроде, в настройках такая функция есть, но я не совсем понял, как ее настроить. Прошу прощения за безграмотность.:o
Nelmak добавил 26.02.2009 в 12:10 Не!!! Все-таки, странно! Смотришь на пассаж, который создала программа - вроде, элементарное словосочетание и должно повторяться в интернете не одну сотню раз, а проверка показывает одно - два совпадения! Вставляешь просто руками эту же фразу в тот же поисковик в кавычках - совсем другая история получается!!! Совпадений - море!!! Странно!!!
По поводу IP.... загружаешь список проксей в программу и она случайным образом отправляет каждый запрос через прокси....
Пишите если можно примеры "странных" пассажей и в каких поисковиках это проявляется (а лучше страницы из которых берутся пассажи)... Дело в том что я во время разработки не мог проверить весь интернет.... потому работал в основном по самым своим знакомым страничкам....
т.е. 2-3...
stardg добавил 04.03.2009 в 08:20
Nelmak: После работы программы Гугл вообще на любой запрос просто в поисковик просит ввести код. Говорит, что с этого адреса идут запросы вируса или шпиона.
Nelmak добавил 26.02.2009 в 12:31 А как ему написать - этому программисту? Он что, форум не читает?
Ого... Гугл чтоли тоже стал роботов гонять? Раньше только яндекс это любил вроде....
stardg добавил 04.03.2009 в 08:23
Sнэйк: praide, как-то сильно притормаживает. Вначале устанавливалась пару минут, потом ещё около минуты открывалась сама программа. Пока только скорость работы не понравилась. Пошёл дальше тестить.
AMD Athlon 64x2 Dual
RAM 1 Gb
OS Windows XP
Я категорически сомневаюсь что имею хоть какое то отношение к данной тормознутости....
У вас ОСь 64 битная чтоле (судя по процу 64)... я незнаю как это будет на 64 биной системе работать - даже проверить неначем....
stardg добавил 04.03.2009 в 08:26
Nelmak: Ну конечно же СПАСИБО!!!:) Просто хотелось узнать, ведутся ли какие-то работы по дальнейшему улучшению программы или нет.
Уважаемые пользователи работы ведутся! Спасибо всем кто присылал результаты тестирования!
Просто некоторые ошибки весьма неоднозначны и на их выявление надо много времени. Но ожидания будут вознаграждены!!!
praide: Блин, задрали:):):) Сегодня днем выкладываю в тест новый вариант! Вместе доводить будем ☝
praide добавил 25.02.2009 в 12:55 Итак, по адресу http://nado.su/downloads.html выложена новая версия проги. Тестим, ругаемся (не на меня), позже сюда подтянется программист stardg. Просьба ему отправлять на почту баги со скринами и по делу.
Йа уже тут!!
🙅
И жду результатов тестирования от Вас!
Пишите будем править вместе!
stardg добавил 25.02.2009 в 19:12
burunduk: а баг с тем что программа зачем-то забирает со страницы то что выводиться JS так и не пофиксили :(
Непонимаю суть проблемы... можно подробнее - на личных примерах?
P.S. Дублируйте свои замечания на stardg@mail.ru задачи более оперативно в таск-лист упадут!
Сейчас готовится новая версия сего продукта. Все вышеуказанные косяки и хотелки будут учтены. Есть такой вопрос .... может кто по интерфейсу чтонибудь дельное предложит? как было бы удобнее, быстрее и интуитивнее? А то пишем тут пишем GUIню всякую, а необходимо и достаточно например в консоле прогу запускать.....
Сам не раскрутчик... потому незнаю 😕
P.S. Кстати о прокси.... в новой версии реализую работу не через браузер, а через голое HTTP, туда проксю навесить несложно, а вот в текущей версии если у вас Internet Explorer ходит в инет через проксю, то и прога должна делать также.... ибо она полностью использует все настройки IE.
searchi: Ok. Конечно спасибо за бесплатную прогу.. Но все же мне она не настолько нужна чтобы уделять ей столько сил.. А проверять по Яндексу как-то правильнее я считаю, поскольку мне (и думаю не только мне) он важнее всех. Просто не очень понял почему нельзя просто кусков 5-10 из текста взять, а не 500..
Ну почему же нельзя.....
Способ 1:
На страничке "Источник" - "вставить текст" .... вставить только тот кусок текста какой вам надо.... и плясать уже от него.
Способ 2:
На страничке "Запрос" в окошке "Исходные данные для запроса" удалить всё что на ваш взгляд лишнее...
Способ 3:
На страничке "Запрос", выбрали поисковики выбрали метод (пассажи или шинглы), нажали кнопку "Выполнить запрос", появилось окошечко "Процесс выполнения запросов"... в нем нажимаем не "Начать", а "Отмена" - окошко "Процесс выполнения запросов" закрывается....
И мы видим перед собой текстовое окошечко "Пассажи или шинглы" - где весь контент уже представлен разбитый на пассажи или шинглы.... Грохаем там всё что кажется лишним и тыцкаем на кнопку "Выполнить запрос" снова.... Кстати в хелпе описано.
stardg добавил 20.08.2008 в 11:08
dm74: У меня такой вопрос:
Я поставил галочку только напротив Yandex.XML. При этом я зашел на Яндекс под своим паролем в XML и зарегил там свой IP. После поиска появилась таблица с количеством найденных страниц. При нажатии в итоговой таблице на цифру вместо страницы с поисковой выдачей Яндекса появляются такие вот страницы в ИЕ:
Вопросы: 1. как сделать так, чтобы при нажатии на кол-во страниц открывалась страница Яндекса с результатами поиска? 2. Я так же ставил галку напротив Гугл, но у меня в таблице выдается все по нулям. Почему? 3. Нужно ли каждый раз входить в Яндекс под своим паролем, когда ставишь галку напротив Yandex.XML? 4. Если я уже зарегил свой IP на Яндексе, то можно ли делать запросы с включенной галкой Yandex (без галки Yandex.XML)?
Ответы:
Yandex.XML - так называется потому что у него выдача в XML-формате, что собственно вы и видите при нажатии на результат запроса.
1) В данный момент Нет! Надо посоветоваться с Praide может стоит сделать парсер XML-контента, но как тут всем угодить? Комуто может именно XML-контент и нужен 😕
2) Ну значит в гугле такого контента нету.... когда нажимаете на "нолик" в результатах то должны увидиеть что отправлялось в гугль и как он ответил.... если выдача действительно пуста, то на нет и суда нет.
3) Нет. Достаточно один раз зарегать свой IP-шник в яндексе.XML. Он приходящие запросы будет по этому IP-шнику унифицировать а не по логину паролю....
4) Нет. Регистрация IP действует только на XML-сервис. Обычный Яндекс, через какоето время начнёт "отстрел роботов".
Dashe4ka: Уже успела проверить кучу сайтов на неуникальность. Словила пару копирайтеров на халтуре! Конечно есть небольшие недоработки о которых уже не однократно говорилось, но это дело наживное и думаю в ближайшее время усовершенствуется. Буду пользоваться сама и посоветую знакомым. Жду от разработчиков новых интересных идей!!!! Удачи и ОГРОМНОЕ СПАСИБО))))))):)
Как разработчик программы, постараюсь прокомментировать некоторые замечания и ответить на некоторые вопросы.
По поводу низкой скорости относительно ВЕБ-версии. Действительно в программе после каждого запроса делается задержка от 0,3 до 1 секунды, иначе поисковики (Особенно Яндекс.неXML) банят IP.
По поводу того, что сайты открываются только в IE. Тут к сожалению сказалось отсутствие нормальных табличных компонентов (не БДшных), потому пришлось строить табличку результатов в окошке IE. Подумаю, может что в руки попадет сделаю качественнее, а пока если проблемма с открытием мозилой стоит остро, могу посоветовать щелкнуть на табличке правой кнопкой мыши, открыть исходник странички, сохранить его как ХТМЛ-файл куданить на жесткий диск, а потом открыть его Мозилой.
stardg, суть в том что если на странице часть контента выводиться JS зачем его брать для анализа? пример отправил в личку
Хм... надо подумать такого я не ожидал...
stardg добавил 04.03.2009 в 08:08
:(Яндекс врет!!!😡 Вот скриншот проверки простого слова "мама".
[ATTACH]29473[/ATTACH]
Ну ладно! Первым двум еще можно поверить. А в Яндексе что? Слово "мама" встречается только в 37-ми местах???😂😂😂 А кликните по этой цифре - что будет???:D Точно не 37 ссылок покажет!!!:)
Да это косяк в следующем релизе будет исправлен - конечно же 37 млн. страниц
stardg добавил 04.03.2009 в 08:13
И еще, пока не забыл. При создании пассажей для проверки появляются лишние пробелы! Например, при вставке фразы "Систематические нарушения в работе компрессора" в проверку было отправлено следующее "Си стематические нарушен ия в работе комп рессора".
А можно узнать страничку откуда сей пассаж был взят? Может фраза в на страничке выглядет цельной, а реально там разметка какая?
stardg добавил 04.03.2009 в 08:19
Приехали!!! Гугл тоже заявил, что я робот!!!:(
Nelmak добавил 26.02.2009 в 11:46
Кстати, вы не могли бы поподробнее объяснить - как сделать так, чтобы поисковик думал, что запросы идут с разных IP? Вроде, в настройках такая функция есть, но я не совсем понял, как ее настроить. Прошу прощения за безграмотность.:o
Nelmak добавил 26.02.2009 в 12:10
Не!!! Все-таки, странно! Смотришь на пассаж, который создала программа - вроде, элементарное словосочетание и должно повторяться в интернете не одну сотню раз, а проверка показывает одно - два совпадения! Вставляешь просто руками эту же фразу в тот же поисковик в кавычках - совсем другая история получается!!! Совпадений - море!!! Странно!!!
По поводу IP.... загружаешь список проксей в программу и она случайным образом отправляет каждый запрос через прокси....
Пишите если можно примеры "странных" пассажей и в каких поисковиках это проявляется (а лучше страницы из которых берутся пассажи)... Дело в том что я во время разработки не мог проверить весь интернет.... потому работал в основном по самым своим знакомым страничкам....
т.е. 2-3...
stardg добавил 04.03.2009 в 08:20
После работы программы Гугл вообще на любой запрос просто в поисковик просит ввести код. Говорит, что с этого адреса идут запросы вируса или шпиона.
Nelmak добавил 26.02.2009 в 12:31
А как ему написать - этому программисту? Он что, форум не читает?
Ого... Гугл чтоли тоже стал роботов гонять? Раньше только яндекс это любил вроде....
stardg добавил 04.03.2009 в 08:23
praide, как-то сильно притормаживает. Вначале устанавливалась пару минут, потом ещё около минуты открывалась сама программа. Пока только скорость работы не понравилась. Пошёл дальше тестить.
AMD Athlon 64x2 Dual
RAM 1 Gb
OS Windows XP
Я категорически сомневаюсь что имею хоть какое то отношение к данной тормознутости....
У вас ОСь 64 битная чтоле (судя по процу 64)... я незнаю как это будет на 64 биной системе работать - даже проверить неначем....
stardg добавил 04.03.2009 в 08:26
Ну конечно же СПАСИБО!!!:) Просто хотелось узнать, ведутся ли какие-то работы по дальнейшему улучшению программы или нет.
Уважаемые пользователи работы ведутся! Спасибо всем кто присылал результаты тестирования!
Просто некоторые ошибки весьма неоднозначны и на их выявление надо много времени. Но ожидания будут вознаграждены!!!
Блин, задрали:):):)
Сегодня днем выкладываю в тест новый вариант!
Вместе доводить будем ☝
praide добавил 25.02.2009 в 12:55
Итак, по адресу http://nado.su/downloads.html выложена новая версия проги. Тестим, ругаемся (не на меня), позже сюда подтянется программист stardg. Просьба ему отправлять на почту баги со скринами и по делу.
Йа уже тут!!
🙅
И жду результатов тестирования от Вас!
Пишите будем править вместе!
stardg добавил 25.02.2009 в 19:12
а баг с тем что программа зачем-то забирает со страницы то что выводиться JS так и не пофиксили :(
Непонимаю суть проблемы... можно подробнее - на личных примерах?
P.S. Дублируйте свои замечания на stardg@mail.ru задачи более оперативно в таск-лист упадут!
Сейчас готовится новая версия сего продукта. Все вышеуказанные косяки и хотелки будут учтены. Есть такой вопрос .... может кто по интерфейсу чтонибудь дельное предложит? как было бы удобнее, быстрее и интуитивнее? А то пишем тут пишем GUIню всякую, а необходимо и достаточно например в консоле прогу запускать.....
Сам не раскрутчик... потому незнаю 😕
P.S. Кстати о прокси.... в новой версии реализую работу не через браузер, а через голое HTTP, туда проксю навесить несложно, а вот в текущей версии если у вас Internet Explorer ходит в инет через проксю, то и прога должна делать также.... ибо она полностью использует все настройки IE.
Ok. Конечно спасибо за бесплатную прогу.. Но все же мне она не настолько нужна чтобы уделять ей столько сил.. А проверять по Яндексу как-то правильнее я считаю, поскольку мне (и думаю не только мне) он важнее всех. Просто не очень понял почему нельзя просто кусков 5-10 из текста взять, а не 500..
Ну почему же нельзя.....
Способ 1:
На страничке "Источник" - "вставить текст" .... вставить только тот кусок текста какой вам надо.... и плясать уже от него.
Способ 2:
На страничке "Запрос" в окошке "Исходные данные для запроса" удалить всё что на ваш взгляд лишнее...
Способ 3:
На страничке "Запрос", выбрали поисковики выбрали метод (пассажи или шинглы), нажали кнопку "Выполнить запрос", появилось окошечко "Процесс выполнения запросов"... в нем нажимаем не "Начать", а "Отмена" - окошко "Процесс выполнения запросов" закрывается....
И мы видим перед собой текстовое окошечко "Пассажи или шинглы" - где весь контент уже представлен разбитый на пассажи или шинглы.... Грохаем там всё что кажется лишним и тыцкаем на кнопку "Выполнить запрос" снова.... Кстати в хелпе описано.
stardg добавил 20.08.2008 в 11:08
У меня такой вопрос:
Я поставил галочку только напротив Yandex.XML. При этом я зашел на Яндекс под своим паролем в XML и зарегил там свой IP. После поиска появилась таблица с количеством найденных страниц. При нажатии в итоговой таблице на цифру вместо страницы с поисковой выдачей Яндекса появляются такие вот страницы в ИЕ:
<?xml version="1.0" encoding="utf-8" ?>
- <yandexsearch version="1.0">
- <request>
<query>"тралаля"</query>
<page>0</page>
<sortby order="descending" priority="no">rlv</sortby>
<maxpassages>2</maxpassages>
</request>
- <response date="20080816T033557">
- <reqwizard level="3">
- <Url level="0">
<link />
</Url>
- <Currency level="0">
<linkusd />
<linkeur />
</Currency>
- <Unquote level="1">
Вопросы:
1. как сделать так, чтобы при нажатии на кол-во страниц открывалась страница Яндекса с результатами поиска?
2. Я так же ставил галку напротив Гугл, но у меня в таблице выдается все по нулям. Почему?
3. Нужно ли каждый раз входить в Яндекс под своим паролем, когда ставишь галку напротив Yandex.XML?
4. Если я уже зарегил свой IP на Яндексе, то можно ли делать запросы с включенной галкой Yandex (без галки Yandex.XML)?
Ответы:
Yandex.XML - так называется потому что у него выдача в XML-формате, что собственно вы и видите при нажатии на результат запроса.
1) В данный момент Нет! Надо посоветоваться с Praide может стоит сделать парсер XML-контента, но как тут всем угодить? Комуто может именно XML-контент и нужен 😕
2) Ну значит в гугле такого контента нету.... когда нажимаете на "нолик" в результатах то должны увидиеть что отправлялось в гугль и как он ответил.... если выдача действительно пуста, то на нет и суда нет.
3) Нет. Достаточно один раз зарегать свой IP-шник в яндексе.XML. Он приходящие запросы будет по этому IP-шнику унифицировать а не по логину паролю....
4) Нет. Регистрация IP действует только на XML-сервис. Обычный Яндекс, через какоето время начнёт "отстрел роботов".
Уже успела проверить кучу сайтов на неуникальность. Словила пару копирайтеров на халтуре! Конечно есть небольшие недоработки о которых уже не однократно говорилось, но это дело наживное и думаю в ближайшее время усовершенствуется. Буду пользоваться сама и посоветую знакомым. Жду от разработчиков новых интересных идей!!!! Удачи и ОГРОМНОЕ СПАСИБО))))))):)
Любой каприз за ваши деньги 🚬
Всем доброго времени суток!
Как разработчик программы, постараюсь прокомментировать некоторые замечания и ответить на некоторые вопросы.
По поводу низкой скорости относительно ВЕБ-версии. Действительно в программе после каждого запроса делается задержка от 0,3 до 1 секунды, иначе поисковики (Особенно Яндекс.неXML) банят IP.
По поводу того, что сайты открываются только в IE. Тут к сожалению сказалось отсутствие нормальных табличных компонентов (не БДшных), потому пришлось строить табличку результатов в окошке IE. Подумаю, может что в руки попадет сделаю качественнее, а пока если проблемма с открытием мозилой стоит остро, могу посоветовать щелкнуть на табличке правой кнопкой мыши, открыть исходник странички, сохранить его как ХТМЛ-файл куданить на жесткий диск, а потом открыть его Мозилой.
По поводу, нечитаемого хелпа - переделаю.
Жду ещё замечаний ☝