Вот это жесть. Прогер сделал косяк и на главной странице по дефолту стояло noindex,follow. Огромное спасибо ivza, что открыл глаза. Так тупо получилось.
ivza: Можно ссылочку в лс? Может подскажу. Тяжело что либо конкретное говорить - проект у вас не маленький и сдается не все там так просто :) С другой стороны, обнуление пр на лицо - выбор причин не слишком широк..
n.b. Совет: напишите через панель веб мастера в гугл, и задайте им этот вопрос
У вас ЛС отключено, не могу отправить.
В гугл писал через request reconsideration, приходил стандартный ответ, что ручных фильтров не наложено. Возможно, надо написать как-то по-особенному запрос? Стоит ли прикрепить вопрос к запросу - отвечают ли они на вопросы?
webdoctor: Поймите правильно - если Вы закрыли страницу в robots.txt, тогда googlebot не зайдет на нее. Также, если страница в индексе и вы решили её закрыть в robots.txt, то да, она пропадет с индекса, но будет доступна в дополнительном поиске. Пример снипета таких страниц: A description for this result is not available because of this site's robots.txt – learn more.
Рекомендация именно для Вас: 1. Настройте правильно <meta name="robots" content="параметр, параметр"> 2. Откройте страницы для доступа робота в robots.txt 3. Поработайте над структурой сайта, так чтобы не было УВ5...9 (как вариант - карта сайта). 4. Сгенерируйте sitemap.xml и скормите в вебмастере ПС.
Спасибо за детальный ответ. Услышал то, что хотел.
Поймите правильно - если Вы закрыли страницу в robots.txt, тогда googlebot не зайдет на нее.
Пункты 1, 3, 4 сделаны еще при запуске сайта, но вот robots.txt отредактировал только вчера, открыл доступ.
WebJunior: Raveex, ваш вариант - метатег с параметрами "noindex, follow", "не индексировать, ходить по ссылкам".
Как настроить это уже технический момент, обратитесь к человеку, тем более у вас самопис.
С самого начала у нас было robots.txt + "noindex,follow", результаты плачевны, по-этому я открыл эту тему. Прочитав статью http://devaka.ru/articles/robots.txt вчера убрал блокирующие строки из robots.txt и оставил только "noindex,follow". А ваше сообщение еще раз подтвердило, что я сделал правильно. Посмотрим на результаты. Спасибо.
easywind: Предлагаете вместо Вас поискать? Если кратко то для гугла только метатегом выкидывать из индекса + потом поставить в роботс запрет на сканирование.
Выкинуть из индекса - дело не хитрое, можно и весь сайт выкинуть махом 😂
Вопрос в другом. Как настроить блокировку так, чтобы гугл передавал вес заблокированной страницы или хотя бы просто воспринимал ссылки с этой страницы и шел по ним индексировать?
Случайно тег noindex,follow на главной не стоит? У меня такое было :D
Куплю домен тематики мыла.
- Тематика всё что касается мыла, типа soap.com.ua
- Зоны украинские интересуют, либо com/net
- Возраст не важен
- Цена до 100 баксов
Есть 3к в наличии. Обращаемся.
Вот это жесть. Прогер сделал косяк и на главной странице по дефолту стояло noindex,follow. Огромное спасибо ivza, что открыл глаза. Так тупо получилось.
P.S> Это мегафейл.
Можно ссылочку в лс? Может подскажу. Тяжело что либо конкретное говорить - проект у вас не маленький и сдается не все там так просто :) С другой стороны, обнуление пр на лицо - выбор причин не слишком широк..
n.b.
Совет: напишите через панель веб мастера в гугл, и задайте им этот вопрос
У вас ЛС отключено, не могу отправить.
В гугл писал через request reconsideration, приходил стандартный ответ, что ручных фильтров не наложено. Возможно, надо написать как-то по-особенному запрос? Стоит ли прикрепить вопрос к запросу - отвечают ли они на вопросы?
Не актуально. Можно закрыть тему.
Актуально.
Поймите правильно - если Вы закрыли страницу в robots.txt, тогда googlebot не зайдет на нее.
Также, если страница в индексе и вы решили её закрыть в robots.txt, то да, она пропадет с индекса, но будет доступна в дополнительном поиске.
Пример снипета таких страниц: A description for this result is not available because of this site's robots.txt – learn more.
Рекомендация именно для Вас:
1. Настройте правильно <meta name="robots" content="параметр, параметр">
2. Откройте страницы для доступа робота в robots.txt
3. Поработайте над структурой сайта, так чтобы не было УВ5...9 (как вариант - карта сайта).
4. Сгенерируйте sitemap.xml и скормите в вебмастере ПС.
Спасибо за детальный ответ. Услышал то, что хотел.
Пункты 1, 3, 4 сделаны еще при запуске сайта, но вот robots.txt отредактировал только вчера, открыл доступ.
Еще раз спасибо 🍻
Raveex, ваш вариант - метатег с параметрами "noindex, follow", "не индексировать, ходить по ссылкам".
Как настроить это уже технический момент, обратитесь к человеку, тем более у вас самопис.
С самого начала у нас было robots.txt + "noindex,follow", результаты плачевны, по-этому я открыл эту тему. Прочитав статью http://devaka.ru/articles/robots.txt вчера убрал блокирующие строки из robots.txt и оставил только "noindex,follow". А ваше сообщение еще раз подтвердило, что я сделал правильно. Посмотрим на результаты. Спасибо.
Предлагаете вместо Вас поискать? Если кратко то для гугла только метатегом выкидывать из индекса + потом поставить в роботс запрет на сканирование.
Выкинуть из индекса - дело не хитрое, можно и весь сайт выкинуть махом 😂
Вопрос в другом. Как настроить блокировку так, чтобы гугл передавал вес заблокированной страницы или хотя бы просто воспринимал ссылки с этой страницы и шел по ним индексировать?