- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу

В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах
Это на 45% больше, чем в 2022 году
Оксана Мамчуева

Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Всем добрый вечер!
Примерно 2 недели назад сайт исчез из индекса. Написал Платону и получил такой ответ:
Здравствуйте, Роман!
Дело в том, что Ваш сайт может индексироваться Яндексом только по адресу
www.site.ru, адрес site.ru является его зеркалом. В данный
момент у Вас установлен серверный редирект с www.site.ru на
site.ru.
Страницы, с которых стоит серверный редирект, удаляются роботом из базы. Чтобы
вернуть сайт в базу Яндекса, необходимо снять редирект, тогда сайт вновь
начнет индексироваться по адресу www.site.ru. Если для Вас важно,
чтобы сайт индексировался именно по адресу site.ru, есть два пути:
1. оставить все как есть, но скорректировать robots.txt, добавив в него:
User-agent: Yandex
Disallow:
Host: site.ru
Важно: блоки указаний роботам должны разделяться пустой строкой. После этого
надо будет дождаться захода на сайт робота зеркальщика, он отследит изменения
и переклеит сайты по адресу, указанному в Host. Процесс переклейки в среднем
занимает до 4–6 недель, ускорить его, к сожалению, нельзя. В этом случае сайт
появится в базе Яндекса только после того, как произойдет "переклейка".
2. снять редирект, скорректировать robots.txt так, как указано выше. В этом
случае сайт вернется в базу Яндекса по адресу www.site.ru, после
переклейки в базе появится site.ru.
До того, как произошла эта проблема, robots.txt на сайте не было.
Сейчас, руководствуясь письмом, написал такой роботс:
User-agent: Yandex
Disallow: /feed
Host: site.ru
Подскажите пожалуйста, правильно ли я сделал? Всем заранее благодарен.
P.S. Возможно стоило создать топик в "Банах и выпадениях из базы", но мне кажется, что тут дело немного в другом.
ну вроде нормально все,)
ravadir, ну собственно ещё редирект снимите, тогда всё будет оке.
Ну а если вы пошли по первому варианту, тогда внимательней читайте инструкции:
блоки указаний роботам должны разделяться пустой строкой.
Подскажите пожалуйста, правильно ли я сделал?
корректней будет так:
Disallow: /feed
Host: site.ru
User-Agent: *
Disallow: /feed
Всем спасибо, попробую...
Если есть аккаунт в панель вебмастера, то там проверяйте в раздел роботс.тхт - на индексации. помогает :)
Хм...
Файл такой (как посоветовал salz):
User-Agent: Yandex
Disallow: /feed
Host: site.ru
User-Agent: *
Disallow: /feed
Проверил через Яндекс.Вебмастер.
Результат:
http://site.ru этот URL не принадлежит вашему домену
http://www.site.ru разрешен
Получается, что ничего не изменилось - робот будет думать, что адрес с www...
Получается, что ничего не изменилось - робот будет думать, что адрес с www...
Все правильно.
Вам же сказал Платон, ждите зеркальщика.
Редирект убрали?
Редирект убрали?
Никак не могу понять - какой редирект? Я его не ставил...
Никак не могу понять - какой редирект? Я его не ставил...
когда в браузере вводите www.site.ru, идет перенаправление на site.ru ?
salz добавил 20.04.2008 в 20:11
В корневой папке сайта файл .htaccess имеется?
когда в браузере вводите www.site.ru, идет перенаправление на site.ru ?
Да, идет...
В корневой папке сайта файл .htaccess имеется?
Да, есть. Такого вот содержания:
RewriteEngine on
<IfModule mod_rewrite.c>
RewriteBase /
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteRule . /index.php [L]
</IfModule>
RewriteCond %{HTTP_REFERER} !^http://site.ru/.*$ [NC]
RewriteCond %{HTTP_REFERER} !^http://site.ru$ [NC]
RewriteRule .*\.(jpg|jpeg|gif|png|bmp)$ - [F,NC]