- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Подскажите как запретить индексировать страницы: архивы, рубрики и другие отдельные страницы?
Ну, во-первых, не robot, а robots.txt
А во-вторых, клик
Там не все понятно))
Если мне надо запретить именно архивы и рубрики, что надо указывать??
Сайт на wp
---------- Добавлено 16.02.2013 в 20:44 ----------
?m=201301
?author=1
cat=1
?cat=1&paged=2
?m=201302
Как запретить индексировать такие ссылки?
Если внимательно читать, то все там понятно.
Disallow: /рубрика
Disallow: /архив
Надеюсь догадаетесь слова "рубрика" и "архив" заменить на название вашей рубрики и директории с архивами?
User-agent: Yandex
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /*trackback
Disallow: /*feed/
Disallow: /*?s=
Disallow: /tag/
Disallow: /20
Disallow: /*comments
Allow: /wp-content/uploads
Host: вашсайт.ру
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /*trackback
Disallow: /*feed/
Disallow: /*?s=
Disallow: /tag/
Disallow: /20
Disallow: /*comments
Allow: /wp-content/uploads
Sitemap: http://вашсайт.ру/sitemap.xml
категории сами закроете) чтобы хоть как-то подучится)
что за ерунда специально для яндекса повторять одно и то же?
foran, как google относится к директиве host?
+ я написал стандарт, чтобы потом меньше вопросов возникало, где яндекс и т.п.
foran, директива хост присваивается Яндексу, а не общему * юзер-агенту. Можно конечно и общему, яша не идиот - поймёт.... но почему бы не написать правильно, по стандарту.