Как максимально ускорить индексирование Yandex

M
На сайте с 11.05.2007
Offline
15
922

Есть сайт на котором каждый день появляется порядка 200 страниц (новостей)

Яндекс по средним прикидкам индексирует 200-350 страниц в неделю, таким образом на сайте уже 4500 страниц, проиндексированно 1600 страниц отрыв постоянно увеличивается.

Вопрос как сделать так чтобы Яндекс индексировал все страницы, и количество проиндексированных было как минимум 90% от существующих страниц?

Может RSS какие-то, или ссылок побольше натыкать, или оценка модераторами какими-то должна повысится?

Mishael
На сайте с 08.11.2001
Offline
217
#1

Попробуйте воткнуться в новостного партнера Яндекса - робот новостей пасется непереставая. Если рылом пока не вышли(меня вот не приняли пока) - тулитесь в поиск по блогам - там все нормально написано в хелпе.

Натыкать ссылок - тоже метод, но более дорогой.

Мой надежный веломагазин (https://veliki.com.ua/) на CMS Melbis Shop 6 (http://www.melbis.com/)
T.R.O.N
На сайте с 18.05.2004
Offline
314
#2

1. Отдавайте ошибку 304 для страниц, которые не менялись.

2. Сделайте хорошую перелинковку.

3.

miftahovn:
Есть сайт на котором каждый день появляется порядка 200 страниц (новостей)
обдумайте, нужно ли это в таком количестве. И на сколько это уникально?

4.

miftahovn:
Вопрос как сделать так чтобы Яндекс индексировал все страницы, и количество проиндексированных было как минимум 90% от существующих страниц?
Все просто, уменьшайте количество страниц, котоые лишены актуальности и информативности.
От воздержания пока никто не умер. Хотя никто и не родился! Prototype.js был написан теми, кто не знает JavaScript, для тех, кто не знает JavaScript (Richard Cornford)
john2007
На сайте с 26.03.2007
Offline
173
#3
T.R.O.N:
1. Отдавайте ошибку 304 для страниц, которые не менялись.

Может лучше Last-Modified: ?

Совершая ошибки, мы не только учимся их не повторять, но и учимся прощать такие же ошибки другим... (с)
T.R.O.N
На сайте с 18.05.2004
Offline
314
#4
john2007:
Может лучше Last-Modified: ?

Вы сейчас о чем?

Это отдавать нужно, но как это избавит от перечитывания страниц? Если всеравно отдавать код 200?

bogavoxnet
На сайте с 26.01.2006
Offline
165
#5
Mishael:
Натыкать ссылок - тоже метод, но более дорогой.

Это как сказать....

Давно собираю базу каталогов, принимающих урлы внутренних страниц.

Если дорого= трудоемко, то да, согласен 100 %.

Но помогает- точно.

При таком темпе роста, как у ТС , возникает вопрос о уникальности контента,

который он хочет скормить Я.

Если с этим все нормально, то завидую белой завистью. :)

Если ВВП РФ за 2019г. взять тысячарублевыми купюрами и выложить их в одну линию-ленту, то этой ленты хватит 14,3 раза от Земли до Марса!!!
john2007
На сайте с 26.03.2007
Offline
173
#6
T.R.O.N:
Вы сейчас о чем?
Это отдавать нужно, но как это избавит от перечитывания страниц? Если всеравно отдавать код 200?

"Насколько критично, что мой сервер не выдает last-modified? Я пытался настроить, но ничего не вышло.

Во-первых, в результатах поиска не будет показываться дата рядом со страницами вашего сайта, а при сортировке по дате сайт не будет виден большинству пользователей. Во-вторых, робот не сможет получить информацию о том, обновилась ли страница сайта с момента последней индексации, а так как число страниц, получаемых роботом с сайта за один заход, ограничено, изменившиеся страницы будут переиндексироваться реже."

http://webmaster.yandex.ru/faq.xml?id=502499#last-modified

john2007
На сайте с 26.03.2007
Offline
173
#7
T.R.O.N:
как это избавит от перечитывания страниц? Если всеравно отдавать код 200?

"HEAD

Аналогичен методу GET, за исключением того, что в ответе сервера отсутствует тело. Это полезно для извлечения мета-информации, заданной в заголовках ответа, без пересылки всего содержимого."

Возможно так.

F
На сайте с 24.08.2006
Offline
35
#8

miftahovn, imho расместите на другом сайте карту своего сайта

T.R.O.N
На сайте с 18.05.2004
Offline
314
#9
john2007:
"HEAD

Вы часто видели, чтобы бот запрашивал head? к томуже и при так запросе, ответ кодом 200 мение предпочтительный, чем 304, явно указывающий, что на странице нет изменений.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий