Ох... у меня и так htaccess оказался переполнен из-за внесения диапазонов... Не хотелось бы его еще больше нагружать. А нет ли такого списка, но для robots.txt?
Хотя... по идее эти боты должны слушаться правила в роботс. Типа такого:
User-agent: PostRank
Disallow: /
Потому что я смотрю, что у меня многие из вашего списка именно так в роботсе и указаны.
У кого-нибудь есть список ботов-краулеров, наподобие SemrushBot, AhrefsBot и т.п.? Тех, что занимаются анализом сайта, и которых можно заблочить через robots.txt
Sindorian#: У меня не мгновенно. Примерно через сутки - двое. До удаления видео было так - страница вылетела из выдачи (полностью), запрос на индексацию, через сутки с копейками страница вернулась, через пару дней прилетает опять ошибка индексации видео, через пару часов страница вылетает из выдачи. И так раза три по кругу. Потом удалил фрейм с видео, поставил ссылку на ютуб, запрос на индексацию, через сутки с копейками страница вернулась и уже две недели не пропадает из выдачи.
Стоп. А у вас какая именно проблема с видео? Потому что даже у меня их две, и они разные. А тут как-то всё в кучу обсуждается.
Вот еще странности насчет связки "Гугл- видео с ютуба"
Каждый день растет число видео, которые Гугл считает слишком высокими. По каким причинам - непонятно. Встраивание в статью идет через код (iframe), который дает сам Ютуб. Что нужно Гуглу - абсолютно непонятно.
Vladimir SEO#: и если послать на проверку - то показывает ошибки опять или начинает проверять ?
В списке больше 20 штук, среди них есть действительно страницы, где видео не отображается по причине того, что оно стало с ограниченным доступом. Исправляю такие страницы и отправляю всё агульно на перепроверку. В итоге Гугл пишет что ошибки не исправлены. Видимо он проверяет первые несколько видео по списку (я их привел выше), они для него почему-то как прежде недоступны, и он отклоняет проверку.Я не знаю что там происходит.
P.S. Я же не зря привел несколько прямых ссылок на видео, которые Гугл счатает недоступными. Ну кликните по ним и убедитесь сами, что он доступны, проигрываются и не имеют ограничений для воспроизведения на сторонних ресурсах.
где гарантия, что новые также не попадут?
А где гарантия, что утверждение выше правда?)
Только не в robots-е, а в htaccess:
Ох... у меня и так htaccess оказался переполнен из-за внесения диапазонов... Не хотелось бы его еще больше нагружать. А нет ли такого списка, но для robots.txt?
Хотя... по идее эти боты должны слушаться правила в роботс. Типа такого:
Потому что я смотрю, что у меня многие из вашего списка именно так в роботсе и указаны.
"Видео находится за пределами области просмотра"
Ну вот. А у меня "видео слишком высокое". Но походу Гугла все равно за что страницу понижать - главное что видео есть )
У меня не мгновенно. Примерно через сутки - двое. До удаления видео было так - страница вылетела из выдачи (полностью), запрос на индексацию, через сутки с копейками страница вернулась, через пару дней прилетает опять ошибка индексации видео, через пару часов страница вылетает из выдачи. И так раза три по кругу. Потом удалил фрейм с видео, поставил ссылку на ютуб, запрос на индексацию, через сутки с копейками страница вернулась и уже две недели не пропадает из выдачи.
Стоп. А у вас какая именно проблема с видео? Потому что даже у меня их две, и они разные. А тут как-то всё в кучу обсуждается.
новый индексатор сделали - а вот допиливать будут как всегда по живому, не первый раз
Так а там хоть в курсе этой проблемы? Никакие же мэты катсы что-то не спешать заявить, что мол ошибочка вышла, исправляем, не волнуйтесь...
Вот еще странности насчет связки "Гугл- видео с ютуба"
Каждый день растет число видео, которые Гугл считает слишком высокими. По каким причинам - непонятно. Встраивание в статью идет через код (iframe), который дает сам Ютуб. Что нужно Гуглу - абсолютно непонятно.
и если послать на проверку - то показывает ошибки опять или начинает проверять ?
В списке больше 20 штук, среди них есть действительно страницы, где видео не отображается по причине того, что оно стало с ограниченным доступом. Исправляю такие страницы и отправляю всё агульно на перепроверку. В итоге Гугл пишет что ошибки не исправлены. Видимо он проверяет первые несколько видео по списку (я их привел выше), они для него почему-то как прежде недоступны, и он отклоняет проверку.Я не знаю что там происходит.
P.S. Я же не зря привел несколько прямых ссылок на видео, которые Гугл счатает недоступными. Ну кликните по ним и убедитесь сами, что он доступны, проигрываются и не имеют ограничений для воспроизведения на сторонних ресурсах.
может там ограничение или приват на встройку - на сайте нормально видео видно и оно работает как всегда ?
На сайте видео работают - никаких проблем.
Приватные видео, может в этом дело?
Какие нафиг приватные? На сайте они у меня просматриваются, на ютубе открываются - а для Гугла они почему-то недоступны.