Анализатор позиции сайтов (реинкарнация)

123 4
VT
На сайте с 27.01.2001
Offline
130
9080

Да простит меня Gray, если посчитает этот топик за рекламу. Но события в этом топике вынуждают меня рассказать, что же все-таки я предлагаю взамен старого анализатора на http://topping.com.ua/position

Анализатор позиции сайтов

1. Назначение

Анализатор позволяет автоматически отслеживать положение сайтов в поисковых системах по определенным запросам.

2. Среда и требования.

Для нормального функционирования программы необходимы:

2.1 операционная система Unix (Linux, FreeBSВ, Solaris и т.д.);

2.2 Perl версии не ниже 5.0;

2.3 библиотека LWP для эмуляции работы броузера или пакет wget;

2.4 cron – планировщик заданий;

3. Реализованные функции:

3.1 запуск анализатора осуществляется по расписанию, что позволяет легко распределять запросы во времени, не создавая лишней нагрузки на поисковые системы;

3.2 позволяет отслеживать позиции неограниченного количества сайтов, как собственных, так и конкурентов;

3.3 позволяет задавать сколь угодно много интересующих запросов;

3.4 количество подключаемых поисковых систем ограничено лишь ресурсами сервера, на котором установлен анализатор;

3.5 возможность выбора для конкретных запросов определенных поисковых систем;

3.6 разбирает информацию, принятую от поисковых систем, извлекает из нее заголовки, описания и ссылки найденных сайтов, и сохраняет ее в удобной для формирования отчетов форме;

3.7 позволяет получать результаты работы анализатора по электронной почте;

4. Дополнительные сведения:

4.1 бесплатная поддержка и обслуживание анализатора в случае

возникновения проблем в течение 12 месяцев с момента приобретения анализатора;

4.2 бесплатное получение обновлений шаблонов поисковых систем в случае обновления их дизайнов (12 месяцев);

4.1 по желанию заказчика возможно внесение в анализатор ряда дополнительных необходимых функций.

5. Базовая версия

В базовую версию входят все основные российские системы Yandex,

Rambler, Aport, Punto и мировые Google, Altavista, Lycos, Excite, Fast, Yahoo. Для украинских заказчиков в базовую версию также включены Мета, Аванпорт и TopPing.

6. Расширенная версия

В расширенном варианте возможно подключение к анализатору любых поисковых систем, которые могут быть интересны заказчику.

wolf
На сайте с 13.03.2001
Offline
1183
#1

Вопрос №1. С какого IP запускается робот? Не возникнет ли у пользователя анализатора проблем с поисковиками, которые могут привести к бану IP пользователя? Те же Яндекс и Гугль прямо утверждают на своих сайтах о недопустимостим работы каких-либо анализаторов позиций с их поисковыми базами, кроме как по специальной договоренности.

Вопрос №2. К топпинговскому анализатору было много нареканий по поводу того, что он неверно определяет позиции сайтов в некоторых случаях. Были ли сделаны какие-то усовершенствования программы в этом плане?

P.S. Вопрос №2 снимается после прочтения постинга Вячеслава в другом топике

Сергей Людкевич, независимый консультант, SEO-аудиты и консультации - повышаю экспертность SEO-команд и специалистов ( http://www.ludkiewicz.ru/p/blog-page_2.html ) SEO-блог - делюсь пониманием некоторых моментов поискового продвижения ( http://www.ludkiewicz.ru/ )
spark
На сайте с 24.01.2001
Offline
130
#2

Слава, привет.

По-моему, Пинг переехал, как и предполагалось.

Были провалы 21 и 26 числа и один раз "склеилась" статистика за 2 дня.

Потом все нормализовалось.

Я понимаю ваше ревностное отношение, но не хотелось бы его хоронить раньше времени. :)

RS
На сайте с 10.09.2002
Offline
60
#3

2Vyacheslav Tikhonov

УРЛ:http://neural.narod.ru

Запрос: искусственный разум

Результат:

Punto 1 30

Rambler 1 50

MavicaNET 1 2

Aport 1 10

Google 1 50

Refer.ru 2 10

List.ru 7 9

Yandex 0 0

напротив Яндекса стоит крест. Когда перехожу по ссылке на поиск по Яндексу, то сайт стоит первый.

Роман
[Удален]
#4
Как писал wolf
Вопрос №1. Не возникнет ли у пользователя

Из лицензии Яндекса: http://www.yandex.ru/info/termsofuse.html

"2.4 Вы не имеете права делать автоматические запросы в Яндекс иначе как с предварительного согласия Яндекса. Обратите внимание, что под понятие "автоматические запросы" подпадают все программы, посылающие запросы в поисковую машину для выяснения, на какой позиции в результатах поиска оказывается данный веб-сайт по разным запросам."

Всегда восхищался умением Яндекса формулировать лицензию так, что при необходимости любой пользователь модет быть обвинен в нарушении лицензии. В данном случае все без исключения web-mastera интересующиеся положением своего сайта, вне зависимости от инструменария и броузера нарушают лицензию.

Sergey Petrenko
На сайте с 23.10.2000
Offline
482
#5

Сохраните эти восторги до конференции - зададите вопрос Сегаловичу в лоб.

Будем действовать так - я его отвлеку, а Агава зайдет сзади :).

F
На сайте с 15.11.2000
Offline
116
#6
Как писал Gray
Сохраните эти восторги до конференции - зададите вопрос Сегаловичу в лоб. Будем действовать так - я его отвлеку, а Агава зайдет сзади :).

Сзади -- и в лоб?! А я-то думал, почему Илья такой умный, у него лоб спереди, и лоб сзади. ;)

С уважением,

Александр Садовский.

P.S. И над каждым лбом -- всевидящее око! :)

F
На сайте с 15.11.2000
Offline
116
#7
Как писал Vyacheslav Tikhonov
2.1 операционная система Unix (Linux, FreeBSВ, Solaris и т.д.);

А под Windows не планируется версия? Думаю, те, кто работают под unix, сами могут написать подобную программу относительно быстро.

С уважением,

Александр Садовский.

VT
На сайте с 27.01.2001
Offline
130
#8
Вопрос №1. С какого IP запускается робот? Не возникнет ли у пользователя анализатора проблем с поисковиками, которые могут привести к бану IP пользователя? Те же Яндекс и Гугль прямо утверждают на своих сайтах о недопустимостим работы каких-либо анализаторов позиций с их поисковыми базами, кроме как по специальной договоренности.

Робот может запускаться с любого сервера. При этом, даже если известен его IP, абсолютно не факт, что роботу может быть закрыт доступ.

Из лицензии Яндекса: http://www.yandex.ru/info/termsofuse.html
"2.4 Вы не имеете права делать автоматические запросы в Яндекс иначе как с предварительного согласия Яндекса. Обратите внимание, что под понятие "автоматические запросы" подпадают все программы, посылающие запросы в поисковую машину для выяснения, на какой позиции в результатах поиска оказывается данный веб-сайт по разным запросам."

Работает же до сих пор топпинговский анализатор, пускай и с оговорками, о которых говорит RedStar, хотя и нарушает лицензию Яндекса, и ничего они с ним не смогли сделать, несмотря на неоднократные попытки.

Вопрос №2. К топпинговскому анализатору было много нареканий по поводу того, что он неверно определяет позиции сайтов в некоторых случаях. Были ли сделаны какие-то усовершенствования программы в этом плане?

Честно говоря, я очень плохо помню код пинговского анализатора, поэтому новую версию переписал полностью с нуля. Скорее всего, проблема там была не только в парсинге, но и в том, что Яндекс определяет, откуда идет запрос, и выводит результаты в соответствии с геотаргетингом.

В любом случае я прекрасно понимаю, что людям абсолютно неинтересна нерабочая программа или программа с глюками. Полагаю, новый анализатор способен работать без каких-либо подобных нареканий, иначе в нем нет никакого смысла.

VT
На сайте с 27.01.2001
Offline
130
#9
А под Windows не планируется версия? Думаю, те, кто работают под unix, сами могут написать подобную программу относительно быстро.

Александр, очень рекомендую почитать "Мифический человеко-месяц" Брукса :) Если на рынке есть программа с нужными характеристиками и умеренной ценой, то зачастую бывает проще купить ее, чем нанимать программистов, составлять подробное ТЗ, потом пытаться получить от них то, что требуется и т.д. К тому же, зачастую нет гарантии, что получится именно то, что хотелось.

Хотя бесспорно, что человек, который понимает, что нужно получить, умеет и знает, как это сделать, сделает быстро.

Анализатор работает и под Windows, только вот беда, нет у окошек своего планировщика заданий, приходится запускать все ручками.

AiK
На сайте с 27.10.2000
Offline
257
AiK
#10
нет у окошек своего планировщика заданий, приходится запускать все ручками.

Есть. at его имя. Очень похож на cron.

123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий