- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта
Применяем отклонение ссылок
Сервис Rookee
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Добрый день, есть сайт ****.com.ua зеркало [[[[.org.ua Yandex проиндексировал ****.com.ua 1131 стр и продолжает индексировать, а [[[[.org.ua тут 200 стр. Как написать yandex(у) что это зеркала, и гууглу а то в гуугле ****.com.ua каждый день стоит все меньше и меньше проиндексированных страниц.
Создай файлик robots.txt со следующим содержанием:
И залей его в корень [[[[.org.ua И жди... Иногда пару недель, иногда пару месяцев.
Создай файлик robots.txt со следующим содержанием:
И залей его в корень [[[[.org.ua И жди... Иногда пару недель, иногда пару месяцев.
а вот это зачем User-Agent: *
Disallow: !?
И как Яндекс тогда будет понимать ? тоесть по конкретному запросу он будет выдавать [[[[.org.ua или ****com.ua ?
User-Agent: *
Host: ****.com.ua
Вот так напишите в robots.txt, в директиве host укажите главное зеркало, и ждите.
а вот это зачем User-Agent: *
Disallow: !?
И как Яндекс тогда будет понимать ? тоесть по конкретному запросу он будет выдавать [[[[.org.ua или ****com.ua ?
User-Agent: указывает, какому поисковику это адресуется. Если стоит звёздочка, то адресуется всем. В нашем случае - Яндексу. Почему именно Яндексу а не всем подряд? Просто директива Host: понимается не всеми поисковиками. Например, Гугля по поводу Host: сообщает, что директива не распозналась.
Disallow: даёт указание, какие папки НЕ ИНДЕКСИРОВАТЬ.
Нет указаний - нет и запрета.
Файлик надо залить на [[[[.org.ua
User-Agent: *
Host: ****.com.ua
Вот так напишите в robots.txt, в директиве host укажите главное зеркало, и ждите.
Есть мнение, что без Disallow не канает. Да и зачем прочим поисковикам читать про хост? Ведь могут понять неправильно, или просто не понять — если там запрещать что-то будете.
Так что Sipaj прав.
А вообще с зеркалами все оченно непросто. Особенно когда поклеятся сайты, да по-кривому. Так что, если нет особых хитрых причин для склейки, просто 301-ым ответом редиректьте на правильное зеркало. Хотя да, для Яндекса будет существовать только основное. 8/
PS пустой Disallow ничего не запрещает. Он вроде как нужен для соответствия стандартам.
Есть мнение, что без Disallow не канает.
Не мнение, а ответ Платона, что Host: должен следовать после всех Disallow:, в примере приводится пустой. Лучше "перебдеть", чем потом гадать, почему все плохо.
Да и зачем прочим поисковикам читать про хост?
Они все равно не понимают, что такое Host:, но видят его и ругаются в любом разделе (проверьте подобный robots.txt с помощью WebMaster Tools в Google, например)