Всех приветствую и благодарю что не прошли мимо.
Ситуация следующая: Интерент-магазин на битриксе. Яндекс очень много находит страниц с знаком ? Пример: /?year /?section и.т.д.Я устал их закрывать. Решил закрыть все страницы с этим знаком директивой Disallow: /*?*Но страницы навигации "пагинация" тоже содержит этот знак вопрос: /komody/?PAGEN_1=2Как только я не пытался прописать в директиве Allow: Allow: / * ?PAGEN_1= * Allow: / ?PAGEN * и.т.д. не помогает, страницы навигации исключены из индекса. Проверяю сервисом. Может кто то сталкивался с подобной проблемой и знает как правильно нужно прописать, чтобы стрницы пагинации индексировались, а все остальные страницы со знаком ? не индексировались. Подскажите пожалуйста.
...
Disallow : /*?
Allow: /*?PAGEN
В вашем примере есть пробелы, возможно причина в этом. В любом случае всегда можно протестировать https://webmaster.yandex.ru/tools/robotstxt/ перед публикацией файла.
не такие - со слайдером картинок. Не могу сейчас найти пример даже
Выше про экскаваторы писали - https://yandex.ru/search/?text=%D0%B0%D1%80%D0%B5%D0%BD%D0%B4%D0%B0+%D1%8D%D0%BA%D1%81%D0%BA%D0%B0%D0%B2%D0%B0%D1%82%D0%BE%D1%80%D0%B0+%D0%BC%D0%BE%D1%81%D0%BA%D0%B2%D0%B0
Да вроде встречается http://joxi.ru/EA4dZDMHvVEV5A
Пожалуйста, перед тем как уличить кого-то в пиаре, постарайтесь подойти внимательно к вопросу. В вашем примере указан другой домен. По данному запросу страниц в выдаче НОЛЬ.
Да, нашел такую возможность для некоторых бирж ссылок в Seopult. Спасибо.
На нескольких сайтах наблюдаю 21 и 22 мая высокую активность ботов спутника. Соглашусь,что надо ждать, по крайней мере пока нет инструментов для вебмастеров и результатов экспериментов энтузиастов.
Предположу, что у Вас есть источник страниц дублей на сайте. Ищите дубли, устраняйте неЧПУ адресацию и настраивайте редиректы или более простой способ - закрывайте дубли в роботсе =).
К уже озвученным 2 причинам (историческая традиция и анализ выдачи/переходов) хотел бы добавить фактор подсознательного управления. Если пользователь не найдет что-то в Яндексе, потом откроет новую вкладку с google и найдет это там, подсознательно он получит опыт, что в яндексе этого не нашел, а в google нашел и в дальнейшем он может перейти в этот поисковик. А если он перейдет на выдачу google прямо из яндекса, то вероятность дальнейшего ухода нет, т.к. переключения между выдачами в голове не откладывается. P.S. не претендую на раскрытие теории заговора, это мое мнение, возможно ошибочное :)
Ну вот хорошая тема годичной давности /ru/forum/752016. Если порыть раздел, можно найти и более старые обсуждения сабжа.---------- Добавлено 16.12.2013 в 12:48 ----------
Все это замечательно, но исходя из ваших рассуждений, выдача строится исходя из того, сколько дали каждому сайту квоты, а не из факторов ранжирования. Извините, но даже предполажив возможность обработки таких объемов данных поисковиком, говорить о релевантной выдачи исходя из правила "ему нужнее" не представляется возможным =)
