Палю тему!!!
В панели вебмастера есть инструмент, так и называется: проверка robots.txt.
Идёте туда, выдергиваете урлы из sitemap и проверяете.
Все доступны в роботс. Вчера отписались - что мол, был запрет, теперь ждите две недели. Сейчас запрета нет, но все равно ждите. Почему гугл работает быстро - запрет - ничего не поудалял, запрет снят - еще больше статей добавил. Сейчас за счет гугла выживаю, спасибо ему большое.
Где здесь запрет на индексацию?
User-agent: * Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-json/ Disallow: /xmlrpc.php Disallow: /readme.html Disallow: /?wptouch_switch= Disallow: /?sa=X&ved= Disallow: /*? Disallow: /?s= Disallow: /?replytocom Disallow: /mideal_faq Disallow: /?hcb= Disallow: /?back= Disallow: /?fbclid= Disallow: /?_sm_nck= Disallow: /?sa= Disallow: /?ref= Disallow: /?post_type=forum Disallow: /sitemap-misc.xml Disallow: /?unsubscribed Disallow: /?ggep_is_embeddable= Disallow: */page* Disallow: */feed* Disallow: */author* Disallow: *membership-join* Disallow: *membership-login* Allow: /*.css Allow: /*.js
И потом у всех страниц вдруг переобход стоит 28-29 марта, когда был запрет. А за 5-9-12 апреля - как будто робот не обходил. Посмотрите - 9 апреля как удалил из индекса, так и не добавлял больше, типа запрет у него:
Железяка даже начала снова добавлять в индекс, когда запрет был снят, но пришел ушленький мальчик-девочка и сказал - а чего это? И все страницы искусственно удалил. Если я могу там роботс изменить - мальчик-девочка типа не может? Изменили, страницы удалили и поставили потом мою версию с сайта... Иначе как можно объяснить - что страницы сначала все добавились в индекс, а потом ушли оттуда. Яндекс мне написал - "мы очень сожалеем что страницы добавились в индекс" - это издевательство, на мой взгляд.
В панели вебмастера уже давно другой роботс висит. И запрета нет к индексации уже 2 недели. Мало того, запрет был снят - и в вебмастере сначала появились страницы. Все что на тот момент вылетели. Потом через 4 дня все страницы выпадают из поиска. За это время написано еще 10 статей и они сначала были добавлены в поиск, но все равно вылетают из него. Яндекс пишет что 5 апреля запрет в роботс, хоть 3 уже снят и новый роботс уже висит - я его меняла еще 3 апреля и там все исправлено - потому что я там же прогнала все статьи и они все не под запретом.)
Выложил новый сайт, зарегил в Я. Яндекс его проиндексировал, сначало первую страницу, через день все остальные. На некоторых страницах в поле описания он почему то выдавал max200.
Через 3 дня он начал удалять страницы из индексации, сегодня утром осталась только первая, а сейчас и вовсе нет ни одной. Как будто и не индексировал вовсе.
Ничего противозаконного не делал, разве только в каталогах регистрировал. Внешних ссылок на сайт тоже нет...
Подскажите что делать в такой ситуации, из за чего такое произошло и как исправить ошибки.
Их девочкам-мальчикам понравился ваш контент, своруют, потом ваш сайт вернут в индекс. Почему это происходит только в Яндекс? В Гугл таких проблем нет? Потому что гуглу не нужен ваш контент, там мальчикам-девочкам хорошие зарплаты платят.
Яндекс наглым образом, воспользовавшись ошибкой в robots.txt удалил все страницы из поиска и индексации, все отправила на переобход, робот обошел и сначала начал добавлять страницы в поиск, а на следующий день искусственно - яндекс удаляет ВСЕ страницы из поиска включая уже добавленные и уходит в несознанку - мол, я не я - на роботс не влияем, ничего сделать не можем, через 2 недели должен быть в поиске. Проходит две недели - а яндекс удаляет даже те страницы, которые уже были добавлены после ошибки в robots.txt.
Явно же они хотят конкурентноспособный сайт удалить, потому что у них свой там кто-то делает похожий сайт. Так этот чертовый Яндекс достал своей нечестной работой. Надеюсь ФАС его оштрафует на многие миллионы долларов. Потому что уже сил никаких нет. Работаешь, работаешь - столько денег на статьи ушло, пишут профессионалы. Хочешь выйти хоть на какие то заработки, а этот чертовый Яндекс посадит каких то мальчиков-девочек, которые ни дня нормально ни работали и они изгаляются - воруют контент, забивают им свои сайты, а те сайты, с которых воруют искусственно удаляют из индекса. Стоит только пожаловаться - так они прессуют еще больше. Надеюсь, этот Яндекс прижмут к ногтю, а лучше национализируют ибо они не только обнаглели, а занимаются реальным беспределом.
так уж и нет? вы код вообще страницы открывали?
Так это же в релевантных статьях, и он там не один стоит.
