Shtogrin: Да скорей никак. OZE предполагает, что когда запрос идет через браузер, то кроме html еще тянется все оформление (скрипты, картинки, стили), а если запросов к этим дополнительным ресурсам нет, то яндекс считает что это робот. Скорее всего это не так. Проверьте правильность отправляемого заголовка, закрытие соединения.
Это все грамотно делает класc snoopy(см. выше, почему-то проблема только с бэками)
OZE: когда идет парсинг выдачи параллельно через JS дергаются нужные урлы, если такие урлы не дергаются, то считаем, то какой-то "умный" бот опять парсит - отправляем его ф топку
изучайте html выдачи, станет понятно;)
У меня скрипт кот. проверяет индексацию саповских ссылок, тут не в самом парсинге дело, а втом что для каждой ссылки нужно скачать 1 страницу, если она всего одна, то все ок, если их больше, то уже ничего не выдает...
hcenter.ru: Посмотрите наши тарифные планы: http://hcenter.ru/tarif.php Хостинг с 2 ГБ места можем предложить за 450 рублей в месяц.
При оплате на 6 месяцев, регистрация доменного имени в зоне RU (net, org, info, com) - Бесплатно.
Есть ли ограничение по кол-ву сайтов и баз данных на ваших тарифных планах ?
Да скорей никак. OZE предполагает, что когда запрос идет через браузер, то кроме html еще тянется все оформление (скрипты, картинки, стили), а если запросов к этим дополнительным ресурсам нет, то яндекс считает что это робот. Скорее всего это не так. Проверьте правильность отправляемого заголовка, закрытие соединения.
Это все грамотно делает класc snoopy(см. выше, почему-то проблема только с бэками)
все верно,
этот способ конечно не является 100%-гарантией, то заставляет в яндекс крутиться некоторые шестеренки
у меня пару раз уже IP банился из-за парсинга выдачи, я связываю это как раз с проверкой через JavaScript
А вы всегда такой способ использовали?
Через Снупи класс не пробовали, сейчас проверил выдачу (обычный поиск) отдает отлично, но вот индексацию бэков через раз правильно?
А если JS отключен в браузере? Я такого ограничения не наблюдаю :)
На непот чтоли проверяете? XML поиск не пробовали использовать?
Не не непот, именно индексацию ссылок. В xml ограничение на 1000 запросов в день...
Никак не пойму как JS связано с работой php скрипта?
когда идет парсинг выдачи параллельно через JS дергаются нужные урлы, если такие урлы не дергаются, то считаем, то какой-то "умный" бот опять парсит - отправляем его ф топку
изучайте html выдачи, станет понятно;)
У меня скрипт кот. проверяет индексацию саповских ссылок, тут не в самом парсинге дело, а втом что для каждой ссылки нужно скачать 1 страницу, если она всего одна, то все ок, если их больше, то уже ничего не выдает...
Несколько каталогов статей, добавление бесплатное, ждем апдейта тица, индексации беков.
Убедительная просьба соблюдать категории, а не валить все в одну кучу, буду удалять.
Из одной статьи не более 3-х ссылок на 1 сайт, иначе тоже буду удалять.
Урлы:
http://www.tvoreniya.ru
http://www.otvechaem.ru
http://www.tvoreniya.org
http://www.otvechaem.org
http://www.geniy.net
http://www.geniy.org
http://www.sochinu.ru
Регистрация:
http://www.tvoreniya.ru/wp-login.php
http://www.otvechaem.ru/wp-login.php
http://www.tvoreniya.org/wp-login.php
http://www.otvechaem.org/wp-login.php
http://www.geniy.net/wp-login.php
http://www.geniy.org/wp-login.php
http://www.sochinu.ru/wp-login.php
Куплю по 0,5 на 30$
Апдейт, господа
Есть подвижки в дизайне интерьеров
Воистину Воскресе
+1 позиция по 2-м низкочастотникам
+10 позиций по 1-му низкочастотнику
+ проиндексировались 2 страницы на другом сайте (теперь их там 3 :D), а все остальное было
Посмотрите наши тарифные планы: http://hcenter.ru/tarif.php
Хостинг с 2 ГБ места можем предложить за 450 рублей в месяц.
При оплате на 6 месяцев, регистрация доменного имени в зоне RU (net, org, info, com) - Бесплатно.
Есть ли ограничение по кол-ву сайтов и баз данных на ваших тарифных планах ?