Мишган,
1. основные боты больших поисковиков соблюдают robots.txt, составленные в соответствии с правилами. Это аксиома, проверенная годами.
2. изменения в robots.txt не начинают действовать мгновенно. Пока не закончится обход очереди ссылок, полученной на предыдущем заходе с учётом правил предыдущей версии robots.txt, могут возникать коллизии.
Вопрос "а почему другие понимают" тут не уместен. Так парсер реализован. Гугль, например wildcards понимает. Это не значит, что все остальные боты обязаны их тоже понимать.
Во-первых, Гугль тоже будет игнорировать данный robots.txt
Ибо нефиг пихать яндексовские директивы в секцию для всех ботов.
Во-вторых, на сколько я помню, RFC позволяет иметь в URI только латинские алфавитно-цифровые последовательности + несколько спецсимволов. Соответственно и запятая, и бакс должны кодироваться как %2С и %24. Так что нечего на Рамблер бочку катить :)
L78, поздравляю! С этим "открытием" вы стали готовым к оптимизации, а не позиционированию. В процентном соотношении где-то только каждый 5-й заказчик SEO осознаёт разницу между оптимизацией и позиционированием в поисковиках. У заказчика есть ещё несколько этапов эволюции :)
Revan, почему мистический-то? Вот вполне не мистический AVA на днях это слово вполне реально произносил. И не запнулся даже :)
Читал на днях статью "Белые кепки против чёрных кепок".
http://www.seomoz.org/articles/white-hat-black-hat.php
Всю пока не осилил - в концовке ушли от темы, читать скучно стало.
С основной мыслью согласен: если делаешь оптимизацию для клиента, то использовать нужно исключительно белые методы. Когда делаешь оптимизацию для себя - то это личное дело каждого, как он будет оптимизироваться. А вот тыкать на спамера пальцем и говорить "фу, как он нехорошо поступает" неразумно. Он ничего не украл и не нарушил ни одного закона. Если свой личный сайт оптимизировал. Тыкать пальцем можно только в того, кто обманул клиента, использовав чёрные методы и вогнав сайт клиента в бан. Хотя тоже в этом мало смысла - он сам себя не меньше наказал, создав себе хреновую репутацию.
И вот что больше всего не понимаю, так это нытьё белых оптимизаторов, когда их обходят чёрные. Вообще-то белость подразумевает работу всерьёз и надолго. Краткосрочные прорывы чёрных в денежных тематиках неизбежны. Но на длительных периодах если работать, а не на судьбу жаловаться, чёрные не имеют ни единого шанса для постоянного лидирования...
HUMMER, а что ты такими запросами оценивать собрался? Открою тебе секрет Полишинеля: порядок следования сайтов по запросам -объединениям, не совпадает с порядком следования по чистым запросам. Связано с кэшированием (не локальным, а на сервере Яндекса). Т.е. сравниваешь ты тёплое с мягким.
kevindark, типа я этого не знаю :) Но обсуждаем мы всё же что за цифирьки показывает Овертюра. По всему выходит, что это количество показов рекламы по всем запросам, содержащим search phrase. Уникальные показы или нет - надо хелпы читать, что лениво как обычно :)
Что касается вопроса про абракадабру, то слова из списка показывают, что есть такая TM. Так что никаких удивлений по наличию статистики по этому запросу у меня не возникает.
По параметру mkt: я на него вообще внимания не обращал. Судя по всему - это сокращение от слова market. Можно подставить, к примеру, uk и посмотреть количество показов на этом рынке.
kevindark, я имею в виду, что море трафика по этим запросам он не получил :)
!Иван FXS, информация на основании сравнений количества переходов с поиска и показываемыми цифрами.
Классический пример - запрос dating. Американцы хоть и тупые, но со школы помнят, что Америца - самая большая страна в мире. Поэтому к запросу dating добавляют New York, Washington, Chiсago и т.д. А также, другие уточнающие слова: online, adult, site, chat. Именно по этой причине, толку от нахождения по запросу dating на первой странице не будет никакого. Почитай, тут владелец syl.com жаловался как-то :)
Не веришь ему - смотри статистику adwords. По слову dating во всяческих сочетаниях Гугль обещает почти 7К кликов в день, а именно по запросу [dating] - ни одного. В реальности их будет несколько десятков в день. А вот точно по запросу [online dating] - 130.
Есть и обратные примеры. Как именно с dating - кликов по рекламе не обещают, а переходы есть. Связано с тем, что именно по таким запросам (не имею в виду [dating]) никто не крутит объяв адвордовских, равно как и на овертюре. Поэтому по статистике поисков (кликов) 0, а в реальности их может быть несколько десятков в день.
Alexey2001, курсовик пишешь? :)
Гугль стал первым по многим причинам. Яху, кстати, не имела тогда своего поиска. Обгонял он альтависту и проч. поисковики, почившие в бозе.
Основная причина - искал Гугль лучше и быстрее. И индексировал существенно быстрее. Т.е. обгонял ещё и по полноте поиска. Плюс очень долго держался без рекламы. Adwords на Гугле появился позже, чем Директ на Яндексе.
