- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Подскажите, пожалуйста, понимают ли роботы поисковиков
подобный формат файла robots.txt:
User-Agent: *
Disallow: /img
Disallow: /about.html
Disallow: /hot.html
Disallow: /hotels1.html
Disallow: /petersburg/aboutr.html
Disallow: /petersburg/hotr.html
Disallow: /petersburg/hotels1r.html
Disallow: /aboutd.html
Disallow: /hotd.html
Disallow: /hotels1d.html
Понятно ли им, что это перечисление? Я был уверен, что
перечисленные файлы запрещены к индексации, но вот уже
прошло более 6 месяцев, а из лог-файлов я вижу, что на эти
страницы ссылаются и yahoo, и yandex точнее ссылаются при
поиске по картинкам. Они все еще ссылаются на картинки, кот.
находятся на этих страницах. При поиске по документам вроде
все в порядке. Почему может такое происходить? Спасибо!
Такой код роботы воспринимают нормально.
Картинки являются отдельными файлами и их надо запрещать для индексации особо. Проверьте, запрещены ли на Вашем сайте те картинки, которые находятся на упомянутых страницах.
Подробнее: http://www.seoman.ru/FAQ/article028.html
Спасибо за ответ. Но как это проверить и как запрещать
картинки? - По указанной ссылке я не нашел этой информации.
Запрещать картинки просто. Это такие же файлы и у них тоже есть адреса на сайте. Вот эти адреса и должны быть запрещены для индексации. Это и проверяйте.
Спасибо. Поянтно. Скажите, а поймут ли роботы вот такую
команду для запрещения индексации картинок
с расширением .jpg:
User-Agent: *
Disallow: /*.jpg$
Насколько я знаю, Google понимает...
Вот только Google ее и поймет, а вернее только его картиночный робот.
А как можно еще написать, чтобы по расширению
поняли и др. роботы (Yandex, Rambler, Yahoo)?