- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Здравствуйте.
Нужна помощь в закрытии страниц от индексации.
Двиг wordpress.
В robots.txt есть директива
Disallow: /category
что не помешало Гоше проиндексировать несколько страниц категорий вида
site.ru/category/kofe-poroshkovyj
site.ru/category/espresso
С чем это может быть связано?
И еще одна проблема.
Гоша также проиндексировал страницы вида site.ru/espresso, что в принципе является аналогом site.ru/category/espresso. Их можно закрыть каким-то образом?
Спасибо.
Здравствуйте.
С чем это может быть связано?
это происходит часто, ищите битую ссылку!
Здравствуйте.
И еще одна проблема.
Гоша также проиндексировал страницы вида site.ru/espresso, что в принципе является аналогом site.ru/category/espresso. Их можно закрыть каким-то образом?
Спасибо.
Так пробуйте! Disallow: /*/category
страницы вида site.ru/espresso, что в принципе является аналогом site.ru/category/espresso
Так пробуйте! Disallow: /*/category
Что за ахинея?
Что за ахинея?
Для этого site.ru/category/espresso.
Для этого site.ru/category/espresso.
Ты бы пошёл матчасть что ли почитал, мусьё советчик.
Disallow: /*/category
не запрещает индексировать
/category/espresso
victor222, вы сначала почитайте ссылки в FAQ про robots.txt, прежде чем в очередной раз так позориться.
Посмотрите какой robots (в броузере: http://site.ru/robots.txt) отдает WP, потому как он отдает его, даже если файл физически не создан в корневой директории.
И проверьте свой robots в панельке вебмастера гугла. Там можно задать путь и посмотреть как гугл его обрабатывает.
Посмотрите какой robots (в броузере: http://site.ru/robots.txt) отдает WP, потому как он отдает его, даже если файл физически не создан в корневой директории.
Я просто не хочу писать адрес настоящего сайта. Сам сайт отдает robots.txt без проблем.
Кстати, вот robots.txt:
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: site.ru
Sitemap: http://site.ru/sitemap.xml
И проверьте свой robots в панельке вебмастера гугла. Там можно задать путь и посмотреть как гугл его обрабатывает.
Гугл считал robots.txt. И Он указан в панели вебмастера. Подскажите, как узнать, как гугл обрабатывает.
WMT-Доступ для сканера: Укажите URL-адреса и роботов User Agent для проверки.
Вставляйте и узнавайте
Disallow: /*/category
не запрещает индексировать
/category/espresso
victor222, вы сначала почитайте ссылки в FAQ про robots.txt, прежде чем в очередной раз так позориться.
Перепутал слово! :) Было 3 часа ночи, с про сони глупости написал! Нужно было спать лучше
Перепутал слово! :) Было 3 часа ночи, с про сони глупости написал! Нужно было спать лучше
Вы имеете в виду
Disallow: /*/espresso ?
У меня 17 таких категорий, и каждую нужно закрывать таким образом?