- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Что делать, если ваша email-рассылка попала в спам
10 распространенных причин и решений
Екатерина Ткаченко
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Здравствуйте, уважаемые форумчане, скажите как решить такую проблему, на сайте есть раздел
==============================
http://vuzi64.ru/rabota
==============================
А в нём есть вакансии - например:
http://vuzi64.ru/rabota/pomoschnik-rukovoditelya-ot-15-500-do-19-500-rub
http://vuzi64.ru/rabota/iphone-programmist
http://vuzi64.ru/rabota/verstalschik-html
==============================
Так вот вопрос
Как сделать так, чтобы закрыть от индексации в robots.txt все странице с вакансиями, но оставить для индексации главную http://vuzi64.ru/rabota ?
Ведь как я понимаю если прибегнуть к
Disallow: /rabota/
То и http://vuzi64.ru/rabota будет не доступна для индексации - я имею в виду та часть текста, которая начинается со слов:
"Здравствуйте уважаемый посетитель Вузы64.ru. Мы рады вам представить новый функционал нашего ресурса. Здесь будет представлена работа для студентов из города Саратова."
Спасибо
например
User-agent: Yandex
Allow: /rabota$ - разрешаем http://vuzi64.ru/rabota
Disallow: /rabota* - запрещаем ссылки по типу http://vuzi64.ru/rabota/verstalschik-html
Т.к. директивы пересекаются, будет выбрана первая
Хорошо, спасибо большое.
riano2010,
User-agent: *
Disallow: /xmlrpc.php
вот так вот закрываю такую страницу. но она не вылетает из поиска, что не так?
Allow: можно вообще не использовать.
Поскольку роботы и без указаний всё индексируют, им нужно указывать, что НЕ нужно индексировать.
В вашем случае достаточно прописать
Disallow: /rabota/
Это правило запретит индексацию всех страниц, которые содержат http://vuzi64.ru/rabota/
Ваша целевая страница http://vuzi64.ru/rabota Без слеша вконце, поэтому правило
Disallow: /rabota/
её не затронет, и она будет индексироваться.
Проверить мои слова можно здесь - http://webmaster.yandex.ru/robots.xml
такую страницу
Проверить мои слова можно здесь - http://webmaster.yandex.ru/robots.xml
В принципе, должна закрыться
Всё сказанное касается ТС, а не Filan. Его проблему я даже не рассматривал.
В принципе, должна закрыться
Спорить не собираюсь, я просто привёл пример того, что показывает сам яндекс.
Частично с вами согласен, так как для закрытия сайта от индексации достаточно прописать правило
Disallow: /
С одной стороны это закрывает сайт от индексации, с другой стороны - главная находится поисковиками.
Но и мой предыдущий пост не лишён логики. Правила индексации можно проверить не только в яндекс вебмастере, но и в гугле. К общему удивлению, результат будет тот же...
У человека изначально неправильно построена структура линков.
При нормальном построении можно было бы прописать
Disallow: /rabota/*.html
Такое правило точно указывало бы на то, что не следует индексировать страницы глубже каталога /rabota/ с расширением .html (или что-то другое)
Используйте инструменты, которые предлагают сами поисковики.
Зачем изобретать велосипед?
Disallow: /
С одной стороны это закрывает сайт от индексации, с другой стороны - главная находится поисковиками.
Про главную не понял. Как она в таком случае находится?
А у меня обратная ситуация. Нужно страницы с вакансиями оставить, а сам раздел скрыть. Так не получится?
А у меня обратная ситуация. Нужно страницы с вакансиями оставить, а сам раздел скрыть. Так не получится?
Получится, если твоя религия не против прочтения хэлпа Яндекса.
Получится, если твоя религия не против прочтения хэлпа Яндекса.
Не с религией все ок. Дайте ссылочку пожалуйста.