По опыту могу сказать, что гуглбот жутко наглый, т.е. все что закрыто в роботсе или через метатеги, он все равно скачивает к себе и даже анализирует, но только не засовывает в индекс.
У Вас задача в том, чтобы бот сервер не нагружал? Или в том, чтобы в индекс не попадал материал, которые он скачает?
Снипет Яндекса отличается от снипета гугла ровно на эту строку (которая из титл или из альт), т.е. Яндекс подтягивают следующую строку за этой картинкой, а гугл подтягивает как раз строку из титл или альт.---------- Добавлено 26.09.2014 в 21:50 ----------
Т.е примерно так
Текст на странице:
===============
Бла-Бла-Бла
Картинка с title и alt
Бла1-Бла1-Бла1
снипет в Яндекс:
===========
Бла-бла-бла
снипет в Гугл:
текст из title или alt картинки
В моей тематике в ТОП1 находится интернет магазин, у которого наихудшие из ТОП10 показатели, причем очень ужасные :) Зато в домене есть ключевое слово.
Это не дорвей, ну да ладно. Смысл в том, что если писать и alt и title в картинках, то гугл при прочих равных лучше ранжирует такие страницы, но, как выяснилось, текст либо с альта, либо с титла картики гугл может запихать в снипет, если эти картинка находится близко к ключевику в тексте.
у Вас что-то с блогом:
abc@linux-wyi9:~> curl -IL http://blog.seopult.ru
curl: (7) couldn't connect to host
Согласен с Вами, но другая тематика (и конкурентность данного ВЧ выше чем у ВЧ+СЛОВО - знаю потому что подобное уже вытаскивал в ТОП1 и в гугле и на яндексе) . Удивляет то, что в Яндексе все как и должно быть СЧ выше, ВЧ ниже (так как пока еще сайт в процесс продвижения и не занял ТОП1 по этим запросам). Вот это в голове не укладывается )---------- Добавлено 25.09.2014 в 14:05 ----------
В личку можно? :)
В своей отрасли - по ВЧ (ТОП1-ТОП3) трафик с майл.ру наблюдаю ничтожный по сравнению с яндекс+гугл на тех же позициях в топе. Чтобы попасть в топ майл ру нужно так же иметь "нормальную" ссылочную массу + внутренняя оптимизация сайта.
Проблема в другом - очень долго доноры попадают в индекс. Продвижение в майл ру я рассматриваю как побочный эффект от продвижения в Яндекс и Гугл.
По наблюдениям - силы затраченные на продвижение в майл ру не сопоставимы с трафиком с майл ру.
Так же выдача у майл ру ужасная.
Зачем ждать :) можно начать уже сейчас, по принципу - "Барышни, Вас еще не индексируют? Тогда мы идем к Вам!" =)
Для оптимизатора важен результат, т.е. скорость продвижения сайта :) а не как быстро идут апы. Конечно одно коррелирует с другим, но написал именно так, так как смотрю с колокольни тех, кто решает задачи продвижения.
Кстати, через год у нас совершеннолетие наступает.
Я бы Яндексу ресурсов побольше пожелал, чтобы скорость продвижения в Яндекс была хотя бы близка к скорости продвижения в Гугл.