- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Добрый день всем вебмастерам!
Если у вас в Яндекс.Вебмастере посыпались сообщения, что мета-тег Canonical изменился на пустое значение - пора бить тревогу! :idea: Вероятно, робот Яши считает, что у вашего сайта есть полное зеркало (вы об этом, конечно, ничего не знаете) и это зеркало - дорвей с обычным копипастом кода вашего сайта на левый домен (а вот об этом ничего не знает робот Яндекса)! Значит, тег Canonical в данном случае неуместен. Какие ещё может сделать выводы робот - неизвестно, но уж поверьте, это за гранью всякой логики…
Как я пришёл к такому выводу? Рассказываю. Однажды, я получил сообщения на почту от Яши, что у большинства важных страниц изменился тег Canonical. Открыв Вебмастер, заметил, что робот стал индексировать ссылки на почту вида:
Как ссылки на страницы:
Естественно, таких страниц на сайте нет, посыпались 301 редиректы на главную.
Пишу 2 тикета в Платонам: один про тег Canonical, второй - про индексацию почтовых ссылок.
И получаю ожидаемые ответы (по тегу Canonical):
А вот по индексации почтовых ссылок Платоны начинают писать ерунду (хотя это и ожидаемо):
Ограничить переход робота по ссылкам с такими адресами можно при помощи тега nofollow.
Если Вы не хотите, чтобы робот обращался к этим страницам, Вы можете запретить их индексирование в файле robots.txt, например, директивой вида:
Disallow: */mailto
В этом случае робот будет знать, что индексировать их не нужно и не будет к ним обращаться. Подробнее о файле robots.txt Вы можете прочитать на странице нашей Помощи: (ссылка на их бла-бла-бла). Рекомендую Вам также воспользоваться инструментом проверки файла robots.txt: (ссылка на их бла-бла-бла). Непосредственно в инструменте Вы можете корректировать указания и проверять, запрещены или разрешены необходимые Вам страницы к индексированию.
Естественно, такой ответ меня не устроил, и я начал "копать дальше". На этой странице задал вопрос Елене Першиной (сотрудник Яндекса, от которого можно иногда получить вразумительные ответы). Но ответ меня не порадовал:
Короче, в этот раз Елена отморозилась. Тогда я опять написал в открытый тикет:
Стандарты HTML для робота не указ?
И с какой стати робот самовольно изменяет код ссылки - добавляет
прямой слеш перед директивой mailto? Где в коде
<a class="email" href="mailto:*******@yandex.ru"> есть прямой слеш?
Уж не знаю, откуда у Платонов взялся вменяемый сотрудник, но он мне разъяснил ситуацию:
Появление же таких ссылок в статистике обхода связано с тем, что в группу зеркал Вашего сайта https://avtoforex.ru/ входит также домен _ttp://cookem.ru, у которого в исходном коде есть ссылки по адресам вида <a class="email" href="_ttp://cookem.ru/mailto:*********@mail.ru">.
В случае, когда роботу известны ссылки на неглавном зеркале, робот может посещать аналогичные страницы и на главном зеркале, проверяя их на доступность. Если права на данный сайт принадлежат Вам, Вы можете удалить такие ссылки с сайта, чтобы робот не посещал их, либо ограничить их индексирование при помощи тега nofollow. На главном же зеркале ограничить запросы к таким ссылкам можно при помощи запрета в robots.txt.
Что же касается добавления слеша в адрес, в целом в таком поведении не будет ошибки. Если ссылка указана не по полному адресу, робот воспринимает её как относительную, поэтому полный адрес формируется относительно адреса домена site.ru/.
В группу зеркал моего сайта! Офигеть!!! А я об этом не знал! Иду по адресу _ttp://cookem.ru - открывается какая-то реклама. Смотрю код - обычный копипаст кода моего сайта, а в конце кода написано - ДОРВЕЙ!!! :madd:
Процитирую то, что я нашёл в коде:
Вот так - робот Яндекса считает, что дорвеи - это зеркала моего сайта! :crazy:
Написал ответ Платонам и посоветовал посмотреть глазками, что их робот считает зеркалами - посмотрим, что они ответят.
А на тикет по поводу изменения Canonical ответа пока нет (прошло 5 дней) - видимо, не могут понять, почему робот смущается, когда есть одинаковый мета-тег Canonical на разных доменах…
Тоже такуже срань заметил, че делать пок не шарю
Тоже такуже срань заметил, че делать пок не шарю
Писать Платонам и объяснять им ситуацию. Надеюсь, если таких обращений будет много - примут меры.
Писать Платонам и объяснять им ситуацию. Надеюсь, если таких обращений будет много - примут меры.
Да мне особо оно нахер не надо, че там происходит — достал этот веб-мастер — шлёт и шлёт свою шляпу, контекст мне в помощь
Мне лично по барабану, я сморю только акк адсенс — остальное это бесы все))))
Ну, если траф с Гугла - тогда да...
Пришел ответ от Платонов. Отмазались, конечно, красиво:
Что же касается атрибута rel="canonical", эти ситуации никак не связаны между собой. Наши специалисты сейчас разбираются, почему в Яндекс.Вебмастере появились такие уведомления.
И доказать им, что никакого редиректа не было - фактически невозможно...
Та же фигня, и я когда прочитал тему, аж присел.
Пойду напишу платонам на всякий