- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах
Это на 45% больше, чем в 2022 году
Оксана Мамчуева
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Вопрос такой: на сайте страницы типа - домен/index.php?p='X'&s='Y' где X и Y - переменные. А проиндексировались часть ссылок, как домен/?p='X'&s='Y' , как с помощью robots.txt запретить к индексу страницы типа домен/?p='X'&s='Y' и разрешить домен/index.php?p='X'&s='Y'. Чтобы актуально и для Яндекса и Google?
Disallow: /?p=
Этого должно быть достаточно. Но здесь проще было бы через htaccess поставить редирект.
Disallow: /?p=
Этого должно быть достаточно. Но здесь проще было бы через htaccess поставить редирект.
так если я поставлю такой disallow - то я думаю, что выпадут все страницы с индекса, так как ?p= - присутствует вовсех страницах.
Щас я пробую следующий код:
User-agent: *
Allow: /index
Disallow: /
Что скажете, так пойдет?
kievyes, если написали вариант файла роботс и не знаете будет ли он работать, то просто проанализируйте его через webmaster.yandex.ru/robots
так если я поставлю такой disallow - то я думаю, что выпадут все страницы с индекса
А ты не думай, мыслитель. Ты мануалы почитай для начала.
Тебе правильно посоветовали.
А что Гугл и Яндекс уже совсем стал не актуален как пс?
Disallow: /?p=
Я таким образом исключил страницу из индекса в роботс.тхт
Но сейчас посмотрел в яндексвебмастере эта страница загружена 😮
Что я не так написал в роботс.тхт😕
Мне нужно,что бы яндекс и гугл не индексировали эту страницу.
Чтобы не плодить темы, спрошу здесь. В общем у меня на сайте появились дубли с адресами сайт/2012-06...
Чтобы запретить их, я делаю Disallow: /2012 ??
И еще вопрос, через какое время изменения в роботс вступают в силу? Нужно как-то роботу сообщать, что роботс сменился?
Если вы поставите:
Disallow: /?p=
то все будет нормально
Выпадут именно страницы, где после / идет ?.
Вот если вы напишите /*?p, вот тогда выпадут и те, которые /index?p
А впрочем попробуйте всяко и проверьте через панели яндекса или гугла
И для Tima44
Disallow: /2012*
Ну если конечно вам надо заблокировать все страницы с /2012
а сообщать роботу не надо - сам увидит. У меня, например, при внесении изменений в роботс гугл их видит в срок от часов до 1 суток. Думаю, зависит от частоты обхода роботом. Другой вопрос - когда он дубли из индекса выкинет. Часть моих дублей до сих пор в соплях гугла висит, хотя удалял через панель. А как закрыть в хтасссес пока не придумал.
И для Tima44
Disallow: /2012*
Ну если конечно вам надо заблокировать все страницы с /2012
а сообщать роботу не надо - сам увидит. У меня, например, при внесении изменений в роботс гугл их видит в срок от часов до 1 суток. Думаю, зависит от частоты обхода роботом. Другой вопрос - когда он дубли из индекса выкинет. Часть моих дублей до сих пор в соплях гугла висит, хотя удалял через панель. А как закрыть в хтасссес пока не придумал.
Так нужно Disallow: /2012* или Disallow: /2012 ?? Символ "*" обязательно нужен?
* - значит любой набор символов. Т.е. если вы ставите * до 2012, то значит до 2012 могут быть любые символы, если после - значит после. Если оставите без *, то будет закрыта только страница /2012 и никакая другая