- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы
Для интернет-магазина инженерных систем
Мария Лосева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Кто работает с поисковиками Яху и Мсн, подскажите пожалуйста такую информацию:
Есть проиндексированный сайт данными поисковиками. Появилась нужда запретить индексацию этого проекта роботами Яху и Мсн. Были прописаны строчки:
User-agent: msnbot
User-agent: Yahoo! Slurp
Disallow: /
Вопрос в том, что как отнесутся данные поисковики к данному действию:
1. Будет остановлена индексация НОВЫХ страниц.
2. Сайт целиком вылетит и исчезнет из выдачи данных поисковиков.
Буду премного благодарен мнениям и наблюдениям..
Почти уверен, что сайт со временем исчезнет из выдачи данных поисковиков.
Почти уверен, что сайт со временем исчезнет из выдачи данных поисковиков.
Спасибо. Есть у кого ещё наблюдения?
Vadik'One, сайт полностью вылетит, тут и думать не надо, так как:
А это всё, запрет индексации всего сайта.
Спасибо. Теперь душа более менее спокойна.
User-agent: msnbot
User-agent: Yahoo! Slurp
Disallow: /
А зачем вы два юзерагента в одну секцию засунули то?
Сетку делаете? :) у меня тоже от них закрыты проекты сеточные
Vadik'One,
как правильно заметил kimberlit, необходимо Disallow / прописать отдельно для User-Agent MSNа и для User-Agent Yahoo. Приведённый в первом сообщении robots.txt не соответствует стандарту.
Сетку делаете? :) у меня тоже от них закрыты проекты сеточные
Это типа чтоб по IP адресу не ловили? :))))
А зачем вы два юзерагента в одну секцию засунули то?
Ух ты, спасибо, если честно с роботом мало работаю, по этому возник вопрос.
Сетку делаете? :) у меня тоже от них закрыты проекты сеточные
Не, не сетку 😂
Vadik'One,
как правильно заметил kimberlit, необходимо Disallow / прописать отдельно для User-Agent MSNа и для User-Agent Yahoo. Приведённый в первом сообщении robots.txt не соответствует стандарту.
Ага, понял..
Вот так верно будет?
User-agent: msnbot
Disallow: /
User-agent: Yahoo! Slurp
Disallow: /
Спасибо за инфо ☝
p.s. А я уже засунул в робота предыдущий вариант, большое спасибо за информацию.
Это типа чтоб по IP адресу не ловили? )))
нет, чтобы нельзя было на реципиент бэки по яху и мсн смотреть