- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
для яндекса - да, оптимально.
но есть еще гугл, рамблер и компания. и все не приветствуют автопарсинг... так что с проблемой все равно придется бороться.
terraSEO, в подобной ситуации можно пойти таким путем -
Выдача яндекса транслируется через произвольный сайт с незабаненным IP, и работа ведется именно с ним. В случае бана транслятор можно легко перенести.
А вообще, Яндекс.XML - оптимальное решение специально созданное для задач подобных вашей.
Так ip будет не сайта а сервера, а если у нас всего 2 допустим? Бегать от хостера к хостеру?
теперь надо бы добится, чтобы бан был снят, но возможно ли это? Яндекс с недоверием отнесется, к словам "мы больше не будем"?
IP одного из хостингов, которым пользуюсь, давно забанен Яндексом - хостинг этот вопрос так и не смог решить, хотя полгода назад писали, что этот вопрос решают. А хостинг немаленький и с положительной репутацией.
Т.е. сайт-то Яндексом находится, но, например, даже тИЦ сайтов скриптом каталога ссылок, размещенном на этом хостинге, получить не удается
Обнаружил я это больше чем полгода назад, саппорт отвечал, что проблема с Яндексом решается, но, тк за полгода не решили, уже не надеюсь
И остается открытый вопрос, сколько же можно сделать запросов в день, что бы не нагружать Яндекс и не получать соответственно бан..?
В лицензии кажется 1000 в день.
Так ip будет не сайта а сервера, а если у нас всего 2 допустим? Бегать от хостера к хостеру?
Почему нет? Перенести транслятор больших проблем не составит.
Кстати, не факт, что это придется делать очень часто - после бана на мастерхосте, подобный скрипт был перенесен на площадку другого хостера, и уже несколько месяцев нормально работает, не смотря на внушительные объемы запросов.
В лицензии кажется 1000 в день.
Автоматические запросы лицензией Яндекса, если честно, вообще запрещаются 🙅. Кроме XML конечно. Тысяча именно там - бесплатно для некоммерческого использования.
Обнаружил я это больше чем полгода назад, саппорт отвечал, что проблема с Яндексом решается, но, тк за полгода не решили, уже не надеюсь
Ох-ох-ох... Плохо... за что боролись на то и напоролись. Просто сервак мощный, хороший... Но все равно буду надеятся на снятие бана.
А вообще, Яндекс.XML - оптимальное решение специально созданное для задач подобных вашей.
Свой скрип-то работает четче, плюс написан специально под "нужды" наши..)
Свой скрип-то работает четче, плюс написан специально под "нужды" наши..)
XML.Yandex - это не скрипт, а "честный" способ делать парсинг выдачи Яндекса.
Я так и делаю - причем ограничение на 1000 запросов с день с 1 IP - вообще не проблема. Что стоит повесить скрипты на несколько серверов (допустим приложить "бонусом" к сайту клиента)? И делай хоть 10000, хоть сколько. ☝
Хотя согласен с написанным выше: хорошо помогает curl и рандом по времени. Пока ни разу не забанили.