Может склеиваются дубли? Если речь о doski.ru, то объявления могут повторяться или быть сильно похожими. Возможно объявления (в основном они короткие) дают слишком мало уникального текста на страницу.
A.Perez: да, не, где то в этом разделе точно есть тема о том, что гугл не индексирует страницы с параметрами. Более того, в этой теме была ссылка на информацию гугла для вебмастеров. Поиск плохо ищет, не нашел
Don't use "&id=" as a parameter in your URLs, as we don't include these pages in our index.
Тут конкретно про параметр id.
А про динамику с другими параметрами ничего страшного не сказано:
If you decide to use dynamic pages (i.e., the URL contains a "?" character), be aware that not every search engine spider crawls dynamic pages as well as static pages. It helps to keep the parameters short and the number of them few.
smscat: факт остаётся фактом.
похоже сайтмап используется для того, чтобы исключать уже запланированные вычитки страниц, которые по данным sitemap не изменились. В том, что этот список не влияет на внесение в список вычитки можешь убедиться сам - впиши в sitemap урл страницы которой нет на сайте, и нет ни одной ссылки на неё. если робот прийдёт за этой страницей - я проиграл.
У меня случайно получился такой эксперимент - добавил в sitemap страницу с не правильным путем. В статистике sitemap она присутствует на вкладке "Ошибки HTTP". Т.е. попытка просканировать ее была, хотя никто на нее не ссылается.
ИМХО, будет очередной форум "обо всем" с нулевой посещаемостью. Для начала 5 разделов - максимум.
Выдача Яндекса забита каталогами и дорами. Они пытаются бороться, но часто отсеивают и нормальные сайты. Иногда даже признают ошибки: http://forum.yandex.ru/yandex/improve.xhtml?message_id=1351201
Раньше искал только в Яндексе, теперь в Google & Rambler (второй в основном для низкочастотных запросов на русском).
Русский раздел Википедии почти весь с кириллицей в URL. Проблем с Яндексом нет: http://www.yandex.ru/yandsearch?serverurl=ru.wikipedia.org
Прочитай на http://www.mattcutts.com/blog/indexing-timeline/ раздел Reading current feedback. Внешние ссылки могут влиять на число проиндексированных страниц.
/ru/forum/6004
Вот что еще умеет: http://www.google.com/help/features.html ;)
Может склеиваются дубли? Если речь о doski.ru, то объявления могут повторяться или быть сильно похожими. Возможно объявления (в основном они короткие) дают слишком мало уникального текста на страницу.
да, не, где то в этом разделе точно есть тема о том, что гугл не индексирует страницы с параметрами. Более того, в этой теме была ссылка на информацию гугла для вебмастеров. Поиск плохо ищет, не нашел
Это?
Тут конкретно про параметр id.
А про динамику с другими параметрами ничего страшного не сказано:
Гугл не индексирует страницы с параметрами, недавно была тема
Ну если недавно - это 5 лет назад :)
Вот, причем на домене 3 уровня!
Лучше скрытым текстом написать "I love Yandex!" 😂
факт остаётся фактом.
похоже сайтмап используется для того, чтобы исключать уже запланированные вычитки страниц, которые по данным sitemap не изменились. В том, что этот список не влияет на внесение в список вычитки можешь убедиться сам - впиши в sitemap урл страницы которой нет на сайте, и нет ни одной ссылки на неё. если робот прийдёт за этой страницей - я проиграл.
У меня случайно получился такой эксперимент - добавил в sitemap страницу с не правильным путем. В статистике sitemap она присутствует на вкладке "Ошибки HTTP". Т.е. попытка просканировать ее была, хотя никто на нее не ссылается.