- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
нужно написать файл robots.txt
и закрыть для индексации допустим папки images и forum - такие строки и вид правильно?:
Disallow: /images/
Disallow: /forum/
такие строки и вид правильно?
да, всё правильно
Спасибо,
тогда еще "хитрый" вопрос (яндексу форумы "по боку", а вот рамблер к форумам неравнодушен - что то можно добавить к строкам
Disallow: /images/
Disallow: /forum/
что бы яндекс форум неиндексировал, а робот рамлера наоборот посещал?
User-Agent: *
Disallow: /images/
User-Agent: Yandex
Disallow: /forum/
Т.е. первой директивой вы всем поисковикам запрещаете индексировать папку с картинками, а второй только яндексу - форум.
первой директивой вы всем поисковикам запрещаете индексировать папку с картинками, а второй только яндексу - форум
А как Яндекс к папке с картинками отнесётся? :)
А как Яндекс к папке с картинками отнесётся?
Вы хотите сказать, что вторая директива переопределит для Яндекса первую (которая для всех роботов) ПОЛНОСТЬЮ?
скорей всего "выпытывает" как Яндекс относится к "графике" -это не важно:
(Яндекс)
andreysmorya, это важно. Собственно графика здесь ни причем
Перечитал http://www.citforum.ru/internet/search/rbtspec.shtml
В любом случае, так будет вернее:
User-Agent: *
Disallow: /images/
User-Agent: Yandex
Disallow: /images/
Disallow: /forum/
Вы хотите сказать, что вторая директива переопределит для Яндекса первую (которая для всех роботов) ПОЛНОСТЬЮ?
Подозреваю, что да :)
скорей всего "выпытывает" как Яндекс относится к "графике"
В данном случае Вы не правы.
K. Ermakov, прав.
В вашей ситуации директивы нужно повторить.
Сначала со звёздочкой для всех. Потом для Яндекса персонально.
Всем спасибо, остановился на последнем варианте, чистоту эксперемента не гарантирую, - посмотрю как на "это" яндекс посмотрит.
теперь проверяю взаимные свои ссылки...
какие файлы закрывает такие строки
Disallow: 10**tur.php
Disallow: /index.php/index.php
Disallow: /index.php/rss/
Host: www.10**tur.ru
моя ссылка у них на странице
http://www.10**tur.ru/index.php?showlink=1&fid=241&p=links&area=1&categ=6
Значит ли, что она закрыта в robots.txt? То есть подобных "партнеров по обмену" - удалять?