Здравствуйте,
Сразу по всем предыдущим сообщениям:
- случайные прокси не используются для Яндекса. Для Google и Yahoo они работают. Яндекс же все такие запросы через эти прокси отсекает, поэтому для Яндекса я эту возможность вообще отключил (т.е. эта опция никак не влияет на Яндекс, все равно запросы идут напрямую). Если кто-то знает, где можно купить списки прокси, через которые можно корректно работать с Яндексом - можно будет этот вариант вернуть. Пока же списки прокси в Semonitor - с www.freeproxy.ru, для Яндекса они не помогают
- у всех у кого сохраняются проблемы - чем не подходит использование Яндекс.xml? Еще раз про xml-арифметику, можно проверить:
- 1000 ключевиков - на глубину 20
500 - на глубину 40
250 - на глубину 80 и т.д.
Если проектов много и этих лимитов не хватает (в данном случае наиболее подходящие видимо будут 500 или 250 слов в сутки при глубине 40 и 80 позиций) - то просто не проверять все проекты в один день. Думаю, что реальной практической необходимости сканить каждый день нет - достаточно раз в 5-7 дней, соответсвенно просто каждый день сканить лишь часть проектов по некоторому графику.
Всего доброго,
Никита Мелькин
Откуда информация? Хотя в принципе вполне возможно
по моим наблюдениям от этого интервала вообще толку никакого нет. Так что выход из ситуации: использовать Яндекс.xml либо уменьшать глубину поиска до 50 позиций на слово. Оба варианта позволяют неплохо работать.
Еще немного подкрутил Семонитор под работу с Украинской выдачей. Итак:
Yandex (RU) - ищет Российский вариант выдачи, независимо от того, где вы находитесь (в России или на Украине)
Yandex (UA) - ищет Украинский вариант выдачи с опцией "страницы из Украины" (параметр *ua=yes")
Яндекс.Регион с выбранным регионом Украина - ищет обычный вариант Украинской выдачи (тот, что предлагается пользователю на Украине автоматически, &lr=187)
Забрать можно через проверку на обновления
Уже :-) см. следующее сообщение
Список урлов грузится из текстового файла? Проверьте, что на конце нет никаких дополительных символов (они могут быть невидимыми, но присутствовать и это вызовет некорректную работу)
Понятно :-)
А IP в xml.yandex.ru зарегистрировали? Сколько всего ушло xml запросов на проверку проекта (Яндекс это число считает и показывает, xml перестает работать когда число запросов превышает 1000)
Обновлены указанные поисковики, можно забрать через проверку на обновления
PS: все таки Яндекс не любит пользователей с Украины :-) Сам на 80% привык пользоваться Яндексом, но:
а. Нахожусь сейчас на Украине
б. Украинский вариант поиска мне нафиг не нужен, а отключить его нельзя (вернее как-то можно, но лениво:-))
в. Ищу в Google теперь.
В теме про Семонитор это все обсуждается, давайте там. Если коротко, то варианты:
- уменьшать глубину поиска (если глубина до 50 позиций идет один запрос на одно ключевое слово и этого хватает на проверку средних проектов)
- дробить проекты
- самый правильный - использовать Яндекс.xml - 1000 запросов в сутки вполне хватит для работы
