Там, где 404 ошибка, были страницы? Они вообще удалены? Изменена адресация?
По срокам когда удалялись?
Если кликнуть на эти строчки, то что показывает?
Надо смотреть. Ссылку можно?
Может быть что-то при переезде напороли, может быть по времени переезд совпал с АГС-40
Изменялся только IP? Менялись структура? дизайн? движок? ДНС-сервер?
Смотря что и как ищется. Ebay, Amazon - это уже магазины,
а Яндекс.Маркет (увы, не весь) по тех.требованиям я выбираю некий товар, а потом смотрю магазины, где он есть---------- Добавлено 24.11.2013 в 01:39 ----------
Я так понимаю, некий пользователь, логикой доказать что-то не может, грубостью не получается, так минусовать решил, ай-ай-ай!
Товар - это уже маркет, там большинство таких вопросов снято, но там каталог.
Специалиста - это тогда надо скорее всего искать не самих специалистов, а сайты, где идут объявления с такими специалистами, а там уже по внутреннему поиску.
На мой взгляд - вместо единого поисковик или в дополнения к нему нужны какие-то тематические поисковики, что-то совмещенное с каталогами, не в понимании ЯК, а в каком-то другом смысле
Синоним - это только один из примеров, вернее, там был не синоним, а пример слова со многими значениями
На мой взгляд, то, что сейчас, это технология середины 90-х, когда по фразе робот пытается понять смысл, когда есть многозначное толкование. И все это зашумлено "черным", "серым", "белым", "платным" продвижением.
А должна быть жесткая привязка
- тематика
- регион
- еще что-то
....
Выбор, например как сейчас в меню гугла - фото, видео, русский, нерусский....
Может быть настройка по словам с большим количеством значений.
Интересно, а кто кого тролит?
http://help.yandex.ru/webmaster/recommendations/indexing.xml
Извнияюсь, то, что Я грузит страницы, я уже доказал
А по остальному - зачем мне доказывать то, что я не утверждал?
Это вы докажите, что я это говорил!
Еще раз внимательно прочитайте, что я утверждал
Уже несколько лет стоит, только прибавляется!
Не надо своей грубостью пытаться что-то доказывать, грубость и крики используют в основном те, кто не прав
На счет этих страниц - так и было задумано. Надо было бы спрятать - закрыл бы под 403 код
А так - нельзя выставлять на индексацию такие страницы, так они у меня и закрыт от индексации.
Я выкинет - так уже несколько лет почему-то не выкидывает
Кстати, еще как учитывают страницы в роботс
Интересно, а кто вам об этом сказал? Вы можете привести официальную информацию об этом?
Или у вам кто-то сливает инсайдерскую информацию об этом?
Не надо приписывать мне то, что я не говорил.
1) АГС накладывается не по одному какому-то признаку, а по совокупности.
2) закрытость страниц в robots.txt это только закрытость от индексации, но не для загрузки и анализа, то что загружается, видно из логов и отчетов на ВМ - я предпочитаю информацию по профилям закрывать по 403 коду.
3) наличие спамных профилей - это признак того, что спам не чистится - один из многих факторов
4) где информация о том, когда профили поместили в роботс изначально? Их могли закрыть вчера, позавчера, до АГС (но после пометки где-то в базе о наличии такого признакоа), после АГС
Где я говорил, что они учитываются в поиске? То, что их учитывает в отчете ВМ - представил доказательства
P.S. А вы логи от Апача по 20 сайтам смотрели, что бы говорить о том, что робот там не ходит?
По вашему скрину как раз и видно, что закрытые страницы у вас грузятся, а потом исключаются из поиска
