- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Маркетинг для шоколадной фабрики. На 34% выше средний чек
Через устранение узких мест
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Ага, конечно.
>
> > Этот адрес закрыт с 30/Oct/2006, потому что с него шел поток автоматических
> > запросов, что противоречит нашей лицензии на поиск
> > http://rules.yandex.ru/termsofuse.xml.
> > Отрывок лога приведен ниже.
>
> > - - [30/Oct/2006:13:37:12 +0300] "GET
> > /yandsearch?text=&numdoc=50 HTTP/1.1" 200 102534 "-" "Robot
> > Semonitor" "www.yandex.ru,80" "-" "yandexuid=3087371162204327" 1162204632
> > - - [30/Oct/2006:13:37:18 +0300] "GET
> > /yandsearch?text=&numdoc=50 HTTP/1.1" 200 103315 "-" "Robot
> > Semonitor" "www.yandex.ru,80" "-" "yandexuid=3087371162204327" 1162204638
> > - - [30/Oct/2006:13:37:24 +0300] "GET
> > /yandsearch?text=&numdoc=50 HTTP/1.1" 200 101563 "-" "Robot
> > Semonitor" "www.yandex.ru,80" "-" "yandexuid=3087371162204327" 1162204644
> > - - [30/Oct/2006:13:37:29 +0300] "GET
> > /yandsearch?text=&numdoc=50 HTTP/1.1" 200 96802 "-" "Robot
> > Semonitor" "www.yandex.ru,80" "-" "yandexuid=3087371162204327" 1162204649
> > - - [30/Oct/2006:13:37:34 +0300] "GET
> > /yandsearch?text=&numdoc=50 HTTP/1.1" 200 102575 "-" "Robot
> > Semonitor" "www.yandex.ru,80" "-" "yandexuid=3087371162204327" 1162204654
> > - - [30/Oct/2006:13:37:39 +0300] "GET
> > /yandpage?&q=837214686&p=1&ag=d&qs=text=&numdoc=50&numdoc=50
> > HTTP/1.1" 200 86614 "-" "Robot Semonitor" "www.yandex.ru,80" "-"
> > "yandexuid=3087371162204327" 1162204659
> > - - [30/Oct/2006:13:37:50 +0300] "GET
> > /yandsearch?text=&numdoc=50 HTTP/1.1" 200 101318 "-" "Robot
> > Semonitor" "www.yandex.ru,80" "-" "yandexuid=3087371162204327" 1162204670
>
>
> > Хотелось бы получить комментарии подобных действий.
И это не первый случай даже у меня. Поэтому теперь сидит программист и пишет парсер яндекс.xml
Вынужден извиниться перед теми, кого ввел в заблуждение в этом посте
/ru/forum/comment/1680164
инструкция
относится к yandsearch и к yandpage
Wolf, Сергей, в особенности перед Вами.
Помнится, они в свое время там были явно прописаны... может из-за этого и не заметил.
инструкция
Цитата:
Disallow: /ya
относится к yandsearch и к yandpage
Ох, уж и выдумщики эти яндексоиды. Однако, если типа таким образом оптимизируют количество директив, то тогда явно излишней выглядит директива
Disallow: /yaca
:)
Хотя в хелпе Семонитора написано:
"Запросы программы выглядят как запросы обычного браузера."
С другой стороны, там же написано: "Q. Большинство поисковых систем запрещают автоматические запросы. Может ли поисковая система заблокировать мой IP адрес за использование вашей программы. A. Мы не знаем ни одного случая подобной блокировки за более чем 2 года использования и распространения программы."
так что :)
Это устаревшая информация. Мне разработчик сам говорил, что у него ip банили.
Опаньки... Действительно. Давненько я не заглядывал в яндексовский роботс... Так это что ж получается, приходи какой угодно робот и забирай из выдачи, чего и сколько пожелаешь? Также хотелось бы коммент от сотрудников Яндекса услышать. :)
Натравили бы Гугл с Рамблером на выдачу Яндекса, ссылки бы замучились считать ... :)
Давайте Рамблер с Гуглом натравим на выдачу Яндекса? Пусть ссылки считают ...
Забанят IP рамы и гугла. Всетаки автоматическое обращение =)))