- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Прочитал http://help.yandex.ru/webmaster/?id=996567
Все понятно. Это именно то, что мне нужно.
Вопрос вот в чем, как будут реагировать другие поисковые системы, скажем, на
User-agent: *
Disallow: /*qwerty
Или они так же как и Яндекс воспринимают эти символы?
Спасибо!
В Вашем примере - аналогично
ок.
И еще, правильно понимаю, что, скажем
Disallow: /chto_to_tam*&key=
запрещает индексацию /chto_to_tam123&key=321 , но разрешает /chto_to_tam123
?
И еще, правильно понимаю, что, скажем
Disallow: /chto_to_tam*&key=
запрещает индексацию /chto_to_tam123&key=321 , но разрешает /chto_to_tam123
?
так оно и есть ...
А по первому вопросу: всё-таки лучше использовать отдельную секцию для Яндекса ...
>всё-таки лучше использовать отдельную секцию для Яндекса ...
А смысл?
Прочитал http://help.yandex.ru/webmaster/?id=996567
Все понятно. Это именно то, что мне нужно.
Вопрос вот в чем, как будут реагировать другие поисковые системы, скажем, на
User-agent: *
Disallow: /*qwerty
Или они так же как и Яндекс воспринимают эти символы?
Спасибо!
На странице http://help.yandex.ru/webmaster/?id=996567 описаны приёмы написания robots.txt исключительно для User-agent: Yandex, применять их на User-agent: * будет не совсем корректно... Другие боты могут понимать этот файл по своему, что Вам может не понравиться, не факт, но все же...
Ну если Вам пофигу на другие поисковики, то можно и не указывать, что эти директивы только для яшки.
--
На заметку, обычно, если другие роботы натыкаются на неизвестные им инструкции, то игнорируют не только их но и все последующие инструкции.
Поэтому, думайте сами, нужно Вам это или нет.
Так ведь чуть выше ответили мне, что другие поисковики понимают символ * так же как и Яндекс.
О каких "неизвестных" инструкциях тогда может идти речь? И каким поисковикам они неизвестны?