- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
В 2023 году 36,9% всех DDoS-атак пришлось на сферу финансов
А 24,9% – на сегмент электронной коммерции
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Помогите пожалуйста запретить в robots.txt индексировать подобные страницы - http://site.ru/board/mail_41becfa88ebdaca09f0a1a723981d8fc.html
Сайт - это доска объявлений, где в каждом объявлении есть возможность отправить на почту автора объявления письмо, эти страницы это форма отправки письма и их столько же сколько объявлений. Все эти урлы отличаются лишь окончанием после /mail_
Пробовал следующее:
Disallow: /mail
Disallow: /*mail
Disallow: /mail*
Disallow: /mail*.html
Disallow: /board/*mail
И многое другое...
Перечитал много статей и рекомендации от Яндекса, но так и не нашел рабочего решения. Чтобы не делал эти страницы добавляются в аддурилку.
Пишите свой сайт. Должно по логике хватить такого.
Disallow: /mail_*
Может не для того домена пишите?
Или может проще, использовать метатег роботс. Указать его в шаблоне такой страницы.
User-agent: *
Disallow: /board/mail*
Где-то так. Если вручную не пихать в аддурилку, то бот их и не проиндексирует.
User-agent: *
Disallow: /board/mail*
Где-то так. Если вручную не пихать в аддурилку, то бот их и не проиндексирует.
Или так
User-agent: *
Disallow: /board/mail
... Чтобы не делал эти страницы добавляются в аддурилку.
вопрос не корректен/неточен. ну добавляются в аддурилку и что? будут в структуре сайта, но в списке страниц закрытых от индексирования файлом роботс.
Перечитал много статей и рекомендации от Яндекса, но так и не нашел рабочего решения. Чтобы не делал эти страницы добавляются в аддурилку.
В аддурилке может быть кривая проверка, лучше проверяйте здесь - http://webmaster.yandex.ru/robots.xml#results
Спасибо. Поставлю пока так - Disallow: /board/mail и посмотрю будут ли индексироваться новые страницы. А старые уже не уйдут?
Но хотелось бы такую конфигурацию, при которой аддурилка будет ругаться...
Fortunato2009 добавил 03.05.2011 в 23:02
В аддурилке может быть кривая проверка, лучше проверяйте здесь - http://webmaster.yandex.ru/robots.xml#results
Вы правы! Спасибо за подсказку.
http://site.ru/board/mail_44b344409edcdd3f86dadceae8270720.html запрещен правилом /board/mail