- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Напрямую сказал, что не учитывает
Правило, он не учитывает, это естественно. Как Вы определили что гугл будет игнорировать весь блок?
вы уверены? если я не ошибаюсь 301-й редирект ставится для гугла, а яндекс никогда не склеит если будет стоять редирект.
Редирект спасает, верно, но если Вы его хотите использовать. Я стараюсь его не ставить. Если ссылки, в основной массе, ведут на нужное зеркало, то все будет нормально. И гугл и яша и рама, - все понимают корректно.
Я стараюсь не использовать
Уже с месяц стоит http://photo.kamforum.ru/robots.txt, явно указывающий на photo.kamforum.ru
Я ждал 3 месяца
Илья, я ждал долго, потом написал Платону, на что получил ответ, типа ждите, в течении 3-4 недель придет бот-робот-хзкто и все будет нормально. Через меньше чем 2 недели все встало на свои места. Пишите Платoну
ни разу более трех- четырех недель не приходилось ждать...
хост в роботс для робота лишь рекомендация...
Преставьть что с зеркала в роботс хост прописан на другой домен, на котором на главной стоит редирект на третий домен, как быть зеркальщику?
Правило, он не учитывает, это естественно. Как Вы определили что гугл будет игнорировать весь блок?
Интересно, гугл пропустит директиву "host:", но учтет всё, что за ней идет? т.е. "www.hhh.ru"? невъезжаю в глубинный смысл под конец дня чего-то... :(
Интересно, гугл пропустит директиву "host:", но учтет всё, что за ней идет? т.е. "www.hhh.ru"? невъезжаю в глубинный смысл под конец дня чего-то... :(
Для Яндекса прописываю отдельный блок в роботс и все отлично...
Для Яндекса прописываю отдельный блок в роботс и все отлично...
А... Вот теперь вкурил, что за блок 🚬... Надо срочно ручник на автомат менять... Торможу сильно 🙄
В этм случае да... Гуглбот пропустит блок, предназначеный яндексботу :)
А... Вот теперь вкурил, что за блок 🚬... Надо срочно ручник на автомат менять... Торможу сильно 🙄
В этм случае да... Гуглбот пропустит блок, предназначеный яндексботу :)
Вот пример, писал сейчас навскидку, поэтому прошу сильно не ругать:
# allrobots for http://site.ru
User-agent: *
Disallow: /admincp/
Disallow: /includes/
Disallow: /javascript/
Disallow: /modules/
Disallow: /templates/
# Yandex for http://site.ru
User-agent: Yandex
Disallow: /includes/
Disallow: /javascript/
Disallow: /modules/
Disallow: /templates/
Host: site.ru
Вот пример, писал сейчас навскидку, поэтому прошу сильно не ругать:
Нормальный вроде :) На первый взгляд...
Я вот сейчас лазал на robotstxt.org, Почему-то не могу вкурить, как кошернее прописывть папку в роботс - как /folder/ или как /folder
Вроде и так, и так считается правильным, а вот как на самом деле ЛУЧШЕ?