- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Здравствуйте. Хочу закрыть сайт от индексации в Яндексе, но оставить во всех остальных ПС.
Что нужно прописывать в robots?
User-agent: Yandex
Disallow: /
---------- Добавлено 14.10.2013 в 16:01 ----------
help yandex в помощь
http://help.yandex.ru/webmaster/?id=996567
User-agent: Yandex
Disallow: /
Disallow: /engine/
Host: url
Sitemap: url/sitemap.xml
User-agent: Yandex
Disallow: /
.......Так?
Да, так 10 символов
Вспомнил интересный факт. Один ушлый продвиженец запретил сайт в роботсе. А потом за приличные деньги его "продвигал", постепенно снимая запреты на страницы и папки.
Пока допиливал сайт указал, но директива
не сработала и Яша нахватал мусора, и гугл тоже, только из гугла можно удалить без проблем, а вот в яше до сих пор страницы висят.. Теперь доступ закрываю через .htaccess
Просто Яндекс не так быстр. Подождите 3-4 апдейта, все выкинет
Просто Яндекс не так быстр. Подождите 3-4 апдейта, все выкинет
Я жду) Уже два с половиной месяца, пока висит..
Да, так 10 символов
Робот продолжает посещать сайт, это нормально?
Загружена у него всего 1на страница, которой и то в индексе нет (АГС).
Запретить индекс хочу чтоб изменить структуру, переписываю сайт на html5, в надежде на вывод из АГС...
Робот продолжает посещать сайт, это нормально?
Робот в любом случае будет заходить на сайт, и проверять robots.txt, а не разрешили ли вы ему проиндексировать сайт.
Не устраивает robots.txt, запрещайте через .htaccess
Попробуйте это:
http://webmaster.yandex.ru/delurl.xml