- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
VK приобрела 70% в структуре компании-разработчика red_mad_robot
Которая участвовала в создании RuStore
Оксана Мамчуева
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
В интернете полно статей по склейке, но дело в том, что у меня в корневой папке один robots.txt для 70 доменов.
Подскажите, возможно ли написать в robots.txt общий код, который будет работать для любого домена и при этом будет правильно склеивать адреса с www и без www как для Яндекса, так и для Гугла?
Склеивать www и не www можно без robots - обычным редиректом на уровне сервера.
Склеивать, надо редиректом в хтацессе, но если сайт уже в индексе, то будут проблемы, если не то зеркало поклеите. Однако за 1-2 месяца яша переклеит. Гуглу пофиг - он сам всё клеит неплохо.
дело в том, что у меня в корневой папке один robots.txt для 70 доменов
Странно, вроде у каждого домена своя корневая папка. 😕
на уровне сервера определять при входящем запросе, к какому из сайтов идёт обращение, после этого пути 2:
- формировать на лету нужный txt-файл с соответственно прописанным Host в нём;
- отдавать один нужный из 70 уже готовых robots`ов.
В интернете полно статей по склейке, но дело в том, что у меня в корневой папке один robots.txt для 70 доменов.
Подскажите, возможно ли написать в robots.txt общий код, который будет работать для любого домена и при этом будет правильно склеивать адреса с www и без www как для Яндекса, так и для Гугла?
Можно заставить сервер парсить .txt файлы и вставлять туда куски кода. Для этого в htaccess нужно добавить AddHandler server-parsed .txt (это небезопасно, погуглите на эту тему).
После этого в robots.txt можно будет прописывать что-то вроде
<!--#if expr=" \"${HTTP_HOST}\" == \"www.site.ru\" " -->Host: site.ru
<!--#else -->
Host: site2.ru
<!--#endif -->
Хороший вариант, спасибо.
Скажите, а если Яндекс Вебмастер говорит, что сайт www.site.ru является зеркалом site.ru - это значит, что заморачиваться по поводу склейки не стоит? Или же наоборот?