- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Вопрос следующий:
Есть 2 сайта: test1.ru и test2.ru
Сайт test1.ru - зеркало сайта test2.ru
Если сначала был проиндексирован test2.ru, а нужно чтобы индексировался только сайт test1.ru, то в таком случаи, нужно в файле роботс написать такую строчку:
Правильно ли я понимаю, что как только робот зайдет на сайт test2.ru, он сразу же перейдет к индексации test1.ru, а сайт test2.ru исключит из поиска (не забанит, а именно исключит?) ?
Правильно ли я понимаю, что как только робот
правильно, но не как только, а долго (месяца 3 в Яндексе)
в гугле достаточно быстро.
правильно, но не как только, а долго (месяца 3 в Яндексе)
в гугле достаточно быстро.
т.е. test2.ru будет индексировать ещё 3 месяца?
А гугл стал понимать host?
Нужен еще 301 редирект в .htaccess на старом домене
По времени новый домен переиндексируется за ~неделю. Старый сайт (некоторые страницы) еще долго будет в индексе, возможно месяцами.
склеиваться они будут 3 месяца после того как оба проиндексируются.
если хотите быстрее читайте про склейку доменов, 301-й редирект и т.д.
склеиваться они будут 3 месяца после того как оба проиндексируются.
если хотите быстрее читайте про склейку доменов, 301-й редирект и т.д.
что значит оба проиндексируются?
Сначала индексируется test2.ru, после того как робот обнаруживает, то что сайт зеркало, он начинает индексировать test1.ru - так как он первоисточник. А сайт test2.ru больше не индексируется. Можно его даже запретить к индексации (test2.ru)
Старый сайт (некоторые страницы) еще долго будет в индексе, возможно месяцами.
это ясно. А будет ли он индексироваться? будет робот парсить его страницы?
это ясно. А будет ли он индексироваться? будет робот парсить его страницы?
Нет. Там сайта вообще не будет для поисковиков, все запросы будут перенаправляться на новый домен.
Нет. Там сайта вообще не будет для поисковиков, все запросы будут перенаправляться на новый домен.
это вы говорите о Яндекс или Google?
это вы говорите о Яндекс или Google?
Про обоих. 301 редирект в .htaccess действует и для яши и для гугла, и для простого юзера. Если посетители будут переходить из выдачи на старый домен, они будут перенаправляться на ту же страницу нового.
host в robots.txt нужен скорее для передачи ссылочной массы от старого домена к новому домена.
не стал создавать новую тему...
цель - запретить заход всех поисковых ботов на мой сайт, за исключением Яндекса и Гугла. правильно ли я сделал ? -->
User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Host: www.site.ru
User-agent: Googlebot
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Host: www.site.ru
User-agent: *
Disallow:
Host: www.site.ru
заранее благодарю за ответ...
xchng, Host с большой буквы
megaBOT,
User-agent: *
Disallow: /