- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы
Для интернет-магазина инженерных систем
Мария Лосева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Появилась проблема в удалении некоторых страниц суб-домена посредством robots.txt размещенный в папке суб-домена и http://webmaster.yandex.ru/delurl.xml, яндекс уверяет в том что:
Документы по адресу http://forums.zzzzzzz.ru/memberlist.php не могут быть удалены из базы Яндекса, так как данный адрес не запрещен в /robots.txt. Нет оснований для удаления.
В то время как в robots.txt прописано, что нельзя индексировать эту страницу
/// robots.txt ///
User-agent: *
Disallow: /memberlist.php
-------------
В чем же может быть проблема ?, кто нибудь сталкивался ? и есть ли методы ее решения.
Запретить можно каталог а не файл
Чего-то Вы путаете имхо.
Disallow: /memberlist.php
Вот как надо:
-----
User-agent: *
Disallow: /memberlist.php
-----
Между User-agent и Disallow не должно быть пустых строк.
GEREM, возможно вы правы. Стандандартно должно поддерживаться. Я понимает не все. В его примерах нет варианта с файлами (я не видел)...
T.R.O.N, в стандарте написано, что блоки разделяются пустыми строками. GEREM безусловно прав, внутри блока пустые строки недопустимы.
"you may not have blank lines in a record, as they are used to delimit multiple records"
Kost, я с этим и не сорю, он прав
Я не уверен что Я понимает запрет индексации файла. Практически не пробовал
GEREM, возможно вы правы. Стандандартно должно поддерживаться. Я понимает не все. В его примерах нет варианта с файлами (я не видел)...
Яндекс прекрасно понимает запрет того или инного файла, и не надо уверять в обратном, темболее если вы того не знаете.
А проблема заключалась именно в том о чем говорил GEREM