а выше в посте решение,
Какое решение? 2 разные ситуации. По склейке и по обходу удаленных страниц. Либо я что-то не понял
Верно. Рабочая очередь - это уже то, что принято к исполнению.
p.s. Многократно сталкивался.
Вот конкретно сейчас рабочая ситуация - написал ТЗ-шку программисту поправить сломавшийся sitemap.xml (по этого всё нормально работало), а программист никому ничего не говоря вообще решил обновить шаблон Аспро Битрикса и затянул туда кучу рекламных данных. Я смотрю у меня на дня в индекс пачками полетели левые разделы, которые после обновления насоздавались в каких-то абсолютно левых разделах. Cмотрю в новый sitemap.xml - а там весь этот мусор тоже подключен.
Всё закрыл, всё удалил, всё поправили, нигде левых данных нет, а Яндекс всё равно ходит по левым адресам. Бестолково и бессмысленно ходит, получая 410, а всё равно ходит, потому что очередь на переобход уже создана.
И обновление рабочих данных пока не помогает. Впрочем, нестрашно, походит и успокоится.
Так причем тут рабочая очередь? Год разными методами выгоняю и ничего. Год же, а не вот вот. О сайтмапе речи даже никогда не шло. Их там не было. Ноуиндекс, 404, 410, роботс, индекснау - все из этого не работает. Я не говорю про индекс, я говорю про ботов яндекса из всех щелей, которым год на все пофиг. Еще так же замечено, при склейки полтора года назад домена, из "загруженных" яндекс не может выкинуть страницы. Полтора года.
Все равно ходит, пробовал. Дошел даже до 410 ответа. Ничто ему не указ. С гуглом все в разы проще, он после первой 404 перестал посещать. Был бы сервак похуже, яндекс клал бы сайт
1. собрать список всех url и выдавать по ним "легкий ответ" (если php, то вида " header("HTTP/1.1 404 Not Found"); exit(0);" )
не помогает
2. добавить их в robots.txt (запрет на индексацию)
3. в yandex.webmaster: "Инструменты -> Удаление страниц из поиска"
Как это должно помочь страницам, которые год отдают 404? в индексе их и не было никогда
Аналогичная беда (правда причина не взлом, а мой косяк с вложенностью урлов, который просуществовал не более 5 минут), яндекс ходит по ним ГОД!!!
Ходит и стандартный бот и фетчер тысячами в день, хотя урлов чуть больше 200. 404 не помогают 410 не помогают.
Есть релаьное решение их отвадить от пагубной привычки?
все просто
пока не вижу сильных движений
Спасибо Михаилу. Помог завести все филиалы на картах. Москва, спб совсем быстро делают, регионы чуть дольше. В целом и до прекращения поддержки от гугла стоило заводить именно так, а не письма пытаться ждать))
11 точек готово, 2 в работе, 2 на очереди
Не на столько, чтобы из небытия запрос выскочил в TOP10 за один ап.
Именно разметка может так сработать. У меня в обратку, если чуть перепишешь разметку (у меня не совсем верная), то резко вниз
