- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Привет.
Есть сайт toptj.com PR=4
есть сайт toptj.tj
есть сайт index.toptj.com
сделал такой вот robots.txt:
User-agent: *
Host: www.toptj.com
ни яндекс ни гугл не объединили toptj.tj с toptj.com
и для одних и тех же запросов выдают ответ с двух сайтов одновременно.
че за хрень. Че сделал не так?
"Disallow:" должен стоять, даже если пустой.
Гугль директиву Хост не знает, и потому не склеит. Яндексу понадобится для этого некоторое время.
Заодно поищите по форуму как сделать редирект 301 при помощи htaccess - это поможет Вам справиться и со склейкой Гугля.
спасибо большое
Чтобы не создавать отдельного, все таки вопрос в тему
-поставил в роботс на сайте http://moneyguard.org
чтобы шло только с www
следущее
Host: www.moneyguard.org
User-agent: *
Disallow:
И сайт вылетел с 500 ошибкой. Ничего не пойму.
Убрал, все нормально грузится. Что не так сделал ?
поставь 301 редирект и не мучайся - любой поисковик отменно клеет по редиректу
.htaccess
RewriteCond %{HTTP_HOST} ^site.ru
RewriteRule ^(.*)$ http://www.site.ru/$1 [R=301]
Чтобы не создавать отдельного, все таки вопрос в тему
-поставил в роботс на сайте http://moneyguard.org
чтобы шло только с www
следущее
И сайт вылетел с 500 ошибкой. Ничего не пойму.
Убрал, все нормально грузится. Что не так сделал ?
Сделайте так
User-agent:Yandex
Disallow:
Host: www.moneyguard.org
User-agent: *
Disallow:
Тогда уж и для рамлера
User-agent:Rambler
Disallow:
Host: www.moneyguard.org
User-agent:Yandex
Disallow:
Host: www.moneyguard.org
User-agent: *
Disallow:
Тогда уж и для рамлера
User-agent:Rambler
Disallow:
Host: www.moneyguard.org
Это ерунда, Рамблер не знает директивы Host.
Kost, рамблер знает директиву хост
Ребят погодите. Вопрос не в том понимает ли что то Рамблер,
и нужен ли он мне.
Вопрос то стоит почему сайт вылетел с ощибкой с этим роботс
Все понял при - копировании попали лишние коды с блокнота попали
Тогда уж и для рамлера
User-agent:Rambler
Правильнее будет так:
User-agent: StackRambler