- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта
Применяем отклонение ссылок
Сервис Rookee
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Привет.
На сайте есть раздел /proizvoditel/
Как ПРАВИЛЬНО в роботс.тхт закрыть директивой.
Чтобы и раздел /proizvoditel/ и все входящие в него страницы были закрыты
Нужно ли отдельно каждому поисковику прописывать правило, или отдельно каждому нужно?
Вообщем подскажите на 100% правильную строчку, которая закроет данный раздел и все входящее в него))
спаибо за помощь.
https://www.ashmanov.com/education/articles/zakryt-sajt-ot-indeksatsii-robots-txt/ - статья разъяснит вам основные аспекты
Как ПРАВИЛЬНО в роботс.тхт закрыть директивой.
Вот так: Disallow: /proizvoditel/
Нужно ли отдельно каждому поисковику прописывать правило, или отдельно каждому нужно?
Чего?
Закрывайте в User-agent: * и все.
Спасибо. Это правильный ответ.
ВОт тебе дружок понятный мануал - читай - задавай вопросы
Прочитал:
Вижу следующее:
Запрет индексации
Раздела
User-agent: *
Disallow: /catalog/
и вот такое:
Всего раздела, кроме одного подраздела
User-agent: *
Disallow: /product
Allow: /product/auto
Это как можно понять мой случай. НО (!!!) там не указано, какой именно закроет данный раздел и все что в него входит
Disallow: /catalog/
или
Disallow: /product
т.е. со знаком / в конце или без него((
---------- Добавлено 22.01.2020 в 12:39 ----------
Вот так: Disallow: /proizvoditel/
Чего?
Закрывайте в User-agent: * и все.
Спасибо большое за ответ.
А вот хороший человек выше прислал ссылку, в ней я вижу следующее
Запрет индексации
Раздела
User-agent: *
Disallow: /catalog/
и вот такое:
Всего раздела, кроме одного подраздела
User-agent: *
Disallow: /product
Allow: /product/auto
Видишь в одном случае есть в конце /, в другом нет.
Disallow: /catalog/
Disallow: /product
или опечатка.
1)Ты на 150% уверен, что правило указанное тобою - закрое и данный раздел и все что внутри него?
2)что будет если в конце твоего правила убрать / ???
3)разве не нужно после последнего / еще ставить звездочку * ?
Директивы в robots - это всего лишь благие пожелания, обращенные к ПС. Гугл на них последнюю пару лет традиционно кладет. Лучше использовать meta robots: https://yandex.ru/support/webmaster/controlling-robot/meta-robots.html
1)Ты на 150% уверен, что правило указанное тобою - закрое и данный раздел и все что внутри него?
О боже...я все написал, что вам нужно для закрытия, точка.
---------- Добавлено 22.01.2020 в 12:12 ----------
Гугл на них последнюю пару лет традиционно кладет
Да, есть такое, но для яндекса по прежнему актуально.
Вот так: Disallow: /proizvoditel/
Чего?
Закрывайте в User-agent: * и все.
150% что так будет верно? Вот так: Disallow: /proizvoditel/ (что закроет и данную папку и все что дальше в ней находится???
Нисколько не умоляю правоты твоего ответа, но вот что я нашел
Disallow: /admin/ — запрещает индексацию всех страниц, находящихся внутри раздела admin;
Disallow: /help — запрещает индексацию и /help.html, и /help/index.html;
Disallow: /help/ — закрывает только /help/index.html;
или вот
Disallow: /catalog
Allow: /catalog/auto
# запрещает скачивать страницы, начинающиеся с '/catalog',
# но разрешает скачивать страницы, начинающиеся с '/catalog/auto'.
т.е. видишь: Disallow: /admin/ — запрещает индексацию всех страниц, находящихся внутри раздела admin;
но ничего не говорится закроется ли сам раздел
150% что так будет верно?
Отвечаю последний раз, ДА!
---------- Добавлено 22.01.2020 в 12:24 ----------
но вот что я нашел
Молодец, хвалю, что еще нашел?
---------- Добавлено 22.01.2020 в 12:25 ----------
т.е. видишь: Disallow: /admin/ — запрещает индексацию всех страниц, находящихся внутри раздела admin;
но ничего не говорится закроется ли сам раздел
Какой же бред ты пишешь
Спасибо тебе за ответы большое
Но чем отличается
Disallow: /catalog/
от
Disallow: /catalog
??
второй случай разве не закроет все что внутри него или
---------- Добавлено 22.01.2020 в 13:32 ----------
Последний вопрос))
Правило, который ты написал
Вот так: Disallow: /proizvoditel/
закроет прям-всё всё??
Например структура такая
/proizvoditel/toshiba/televizor
Твоя директива закроет и 2й и 3й и т.д. уровни вложенности? или только 2й уровень вложенности (toshiba) ??
limyh, Какой же ты надоедливый.
Disallow: /proizvoditel/
Закроет:
/proizvoditel/
/proizvoditel
/proizvoditel/жопа
/proizvoditel/жопа/говно
не закроет
/proizvoditelжопа/
Disallow: /proizvoditel
Закроет:
/proizvoditel/
/proizvoditel
/proizvoditel/жопа
/proizvoditel/жопа/говно
/proizvoditelжопа/
Теперь понял?
ДА, теперь понял тебя на 100%
Но видишь 2й случай (без слеша / ) закрывает вообще все, ничего не упускает :)
Спасибо тебе хороший человек
дай бог тебе здоровья))