Как писал Lutsky Господа может кто знает есть ли какой-то лимт у поискового робота Яндекса?
В частности меня интересует сколько страниц робот может забрать с разных сайтов с одного сервера (с одним IP) в один заход или в неделю.
У меня последнее время странная ситуация с совсем новыми сайтами, заходит, берет главную и уходит. Со старыми тоже беда, берет совсем новые страницы, а измененные старые его не интересуют.
Может господа из Яндекса, что подскажут. Это даже к оптимизации не относится, сами поймите, людям магазин сделали к вам добавили, а он не индексит. Хотя через Яндекс маркет 200 переходов в день. Понимаю что надо подождать, но все же проясните ситуацию с IP.
у меня робот кушал и по 300 и по 500 и по 600 страниц за раз.
но сейчас яндекс всяко испытывает перегрузки с индексацией, потому индексит мягко говоря хе%%во.
Как писал Infors У меня с Аппорта фактически - пусто (4-7 переходов), а вот с Рамблера более 200. И это длиться уже давно. Я Аппорт уже перестал учитывать, как серьезный поисковик. Возможно я не прав?
я тоже до не давнего времени Апорт в расчет не брал, но после эмуляции статики он у мне дает посетителей почти соизмеримо с гуглем, но более целевых :)
Как писал wolf Я уже писал о том, что Яндекс некорректно склеивает отдельные страницы. Суть проблеммы такова. По профильному запросу главная страница сайта www.сайт.ru находилась в первой десятке. После очередного апдейта по данному запросу она упала в никуда - на 19-ю страницу выдачи, причем вместо страницы www.сайт.ru там находится страница www.сайт.ru/index.html По запросу #url="www.сайт.ru" выдается страница www.сайт.ru/index.html. Стало быть, эти дубликаты главной страницы склеены и главной выбрана www.сайт.ru/index.html. Однако, запросы #link="www.сайт.ru" и #link="www.сайт.ru/index.html" дают разные результаты - в первом случае почти 20000 ссылающихся страниц, во втором случае - 0. Напрашивается вывод, что при склейке дубликатов ссылки, указывающие на www.сайт.ru, не учитываются для выбранной главным зеркалом страницы www.сайт.ru/index.html, что не есть правильно. Причем, такое положение наблюдается по всем запросам. И когда периодически главным зеркалом выбирается опять страница www.сайт.ru, то она поднимается по этим запросам обратно на первые страницы выдачи.
Поэтому хочу задать представителям Яндекса такой вопрос. Если я запрещу в robots.txt страницу index.html, позволит ли это расклеить эти дубликаты главной страницы и корректно проиндексировать страницу www.сайт.ru?
Самое удивительное что они заявляют, что зеркала у них склеиваются и ИЦ и ТИЦ суммируется - но все это чушь, потому как у нас есть сайт, которому уже 5 лет и зеркалу ему 5 лет (у них один ip) - и до сих пор яндекс его склеивать не хочеть, а дотошная тех. поддрежка яндекса либо на письма не отвечает или говорит -
"Зеркалами считаются абсолютно идентичные по содержанию ресурсы.
Именно они склеиваются и их индексы суммируются."
как буд-то везде одни идиоты и этого не знают, самое интересное что они похоже вопросы не до конца читают :)
Как писал NULL У меня с Апорта идет примерно столько же, сколько с Гугла или c go.mail.ru; тоже не очень много, но порядок такой же.
У переходов с Апорта на мой сайт самый высокий показатель хитов на сессию среди поисковиков - публика, действительно, качественная.
А откуда такая статистика, да еще с такой точностью? Не со спайлога часом?
Как писал valerapopov mnt, хорошо, что вы не на их месте... вообще, что за бредовая тема... если сайт отвечают заявленной теме и дизайнер украсил страницу стилями в том числе и для H1 и т.д., с какого бодуна его спамером звать... идиотизм крепчал....
если бы вы внимательней прочитали мои высказывания, то бы поняли что тот случай о котором вы написали спамом не считается.
а без разбору банить тех умников, которые в обычном блоке текста пытаются выделить ключеные слова тегами h1,h2,h3 применяя к ним стили.
К сожалению, есть еще один параметр, о котором интервьюруемый тактично умолчал. Активность роботов. Естественно, никаких обобщений.
420 0.23% Yandex/1.01.001 (compatible; Win16; I)
240 0.13% Yandex/1.03.000 (compatible; Win16; M)
179 0.10% Yandex/1.01.001 (compatible; Win16; P)
62 0.03% Yandex/1.01.001 (compatible; Win16; H)
1 0.00% Yandex/1.03.003 (compatible; Win16; D)
1 0.00% Yandex/1.01.001 (compatible; Win16; i)
20 0.01% StackRambler/1.4
Активность Фаста и Гугля не привожу из сотрадания к господину Шабанову. А остальное - лирика.
твой сайт роботы не любят, вот мои данные за месяц ;)
зы... вру статистика начала собираться с серидины месяца ;)))
FAST-WebCrawler/3.8 (atw-crawler at fast dot no; http://fast.no/support/crawler.asp) September 7463
Googlebot/2.1 (+http://www.googlebot.com/bot.html) September 5758
StackRambler/2.0 September 2218
Yandex/1.01.001 (compatible; Win16; M) September 744
Yandex/1.01.001 (compatible; Win16; I) September 613
FAST-WebCrawler/3.8/Fresh (atw-crawler at fast dot no; http://fast.no/support/crawler.asp) September 30
Yandex/1.03.000 (compatible; Win16; M) September 28
Mozilla/4.0 (compatible; MSIE 5.0; YANDEX) September 20
Yandex/1.03.003 (compatible; Win16; D) September 10
Mediapartners-Google/2.1 (+http://www.googlebot.com/bot.html) September 1
Aport September 1
Господа может кто знает есть ли какой-то лимт у поискового робота Яндекса?
В частности меня интересует сколько страниц робот может забрать с разных сайтов с одного сервера (с одним IP) в один заход или в неделю.
У меня последнее время странная ситуация с совсем новыми сайтами, заходит, берет главную и уходит. Со старыми тоже беда, берет совсем новые страницы, а измененные старые его не интересуют.
Может господа из Яндекса, что подскажут. Это даже к оптимизации не относится, сами поймите, людям магазин сделали к вам добавили, а он не индексит. Хотя через Яндекс маркет 200 переходов в день. Понимаю что надо подождать, но все же проясните ситуацию с IP.
у меня робот кушал и по 300 и по 500 и по 600 страниц за раз.
но сейчас яндекс всяко испытывает перегрузки с индексацией, потому индексит мягко говоря хе%%во.
Если сайт коммерческий (что-то продает), не ждать и не стучаться, а сразу готовить денюжку.
С уважением,
Виктор
ваша неправда, заносят коммерческие сайты бесплатно. по крайней мере наш сайт занесли, другое дело сколько времени ждать.
У меня с Аппорта фактически - пусто (4-7 переходов), а вот с Рамблера более 200. И это длиться уже давно. Я Аппорт уже перестал учитывать, как серьезный поисковик. Возможно я не прав?
я тоже до не давнего времени Апорт в расчет не брал, но после эмуляции статики он у мне дает посетителей почти соизмеримо с гуглем, но более целевых :)
Gosha, а при чем здесь Яндекс? Стили не успели подгрузиться...
не имеет значения успели или не успели. Какому-нибудь простому чайнику этого не объяснишь.
Я уже писал о том, что Яндекс некорректно склеивает отдельные страницы. Суть проблеммы такова. По профильному запросу главная страница сайта www.сайт.ru находилась в первой десятке. После очередного апдейта по данному запросу она упала в никуда - на 19-ю страницу выдачи, причем вместо страницы www.сайт.ru там находится страница www.сайт.ru/index.html
По запросу #url="www.сайт.ru" выдается страница www.сайт.ru/index.html. Стало быть, эти дубликаты главной страницы склеены и главной выбрана www.сайт.ru/index.html. Однако, запросы #link="www.сайт.ru" и #link="www.сайт.ru/index.html" дают разные результаты - в первом случае почти 20000 ссылающихся страниц, во втором случае - 0. Напрашивается вывод, что при склейке дубликатов ссылки, указывающие на www.сайт.ru, не учитываются для выбранной главным зеркалом страницы www.сайт.ru/index.html, что не есть правильно. Причем, такое положение наблюдается по всем запросам. И когда периодически главным зеркалом выбирается опять страница www.сайт.ru, то она поднимается по этим запросам обратно на первые страницы выдачи.
Поэтому хочу задать представителям Яндекса такой вопрос. Если я запрещу в robots.txt страницу index.html, позволит ли это расклеить эти дубликаты главной страницы и корректно проиндексировать страницу www.сайт.ru?
Самое удивительное что они заявляют, что зеркала у них склеиваются и ИЦ и ТИЦ суммируется - но все это чушь, потому как у нас есть сайт, которому уже 5 лет и зеркалу ему 5 лет (у них один ip) - и до сих пор яндекс его склеивать не хочеть, а дотошная тех. поддрежка яндекса либо на письма не отвечает или говорит -
"Зеркалами считаются абсолютно идентичные по содержанию ресурсы.
Именно они склеиваются и их индексы суммируются."
как буд-то везде одни идиоты и этого не знают, самое интересное что они похоже вопросы не до конца читают :)
У меня с Апорта идет примерно столько же, сколько с Гугла или c go.mail.ru; тоже не очень много, но порядок такой же.
У переходов с Апорта на мой сайт самый высокий показатель хитов на сессию среди поисковиков - публика, действительно, качественная.
А откуда такая статистика, да еще с такой точностью? Не со спайлога часом?
ты на год посмотри в этой статистике
она старая !
mnt, хорошо, что вы не на их месте... вообще, что за бредовая тема... если сайт отвечают заявленной теме и дизайнер украсил страницу стилями в том числе и для H1 и т.д., с какого бодуна его спамером звать... идиотизм крепчал....
если бы вы внимательней прочитали мои высказывания, то бы поняли что тот случай о котором вы написали спамом не считается.
а без разбору банить тех умников, которые в обычном блоке текста пытаются выделить ключеные слова тегами h1,h2,h3 применяя к ним стили.
С чего вы это взяли ? У вас есть примеры забаненых за это проектов ? Или просто так ?
примеров нет , но у меня сложилось такое вчатление по общению с их тех поддержой - что если будешь слишком злобствовать, то могут принять меры.
Ну будь я на их месте - я бы всех таких паталогов без разбору банил 😡
В этой цитате довольно ясно заявляется обратное :)
почитайте цитату из яндекса и подумайте, и так покругу пока не дойдет :)
смотря как применять Hx, если подстраивать под дизайн выделяя существующие заголовки статей и т.п - то все окей.
а если в тексте слова и словосочетания выделять специально - то это спам.