Можно ли повлиять на частоту посещения роботами сайта?

12
G
На сайте с 14.12.2009
Offline
68
2646

Можно ли как-то повлиять на частоту индексации новых страниц на сайте? Сейчас гугл приходит где-то раз в 5 дней, яндекс и того реже. Можно ли как-то стимулировать поисковики чаще приходить и проверять новые страницы? Контент весь уникальный.

Alipapa
На сайте с 01.02.2008
Offline
194
#1

Конечно можно. Во-первых, можно ставить ссылки на новые страницы с других сайтов. Во-вторых, анонс со ссылкой на главной странице можно делать. Ну и в-третьих, если сайт будет регулярно часто обновляться, боты станут посещать его намного чаще.

Биржа фриланса - простая и удобная (http://kwork.ru/ref/2541)
Mr.Smile
На сайте с 10.01.2011
Offline
65
#2

Ginger, Сделайте карту сайта, добавьте директиву crawl-delay: 0.1 в robots.txt (но только для Гугла и Яндекса). Расположите ссылки на быстроиндексируемых сайтах. Можете ещё использовать пинг сервисы. Старайтесь, что бы новые страницы были не дальше 1-2 кликов от главной. Если сайт будет часто обновляться, то и ПС будут заходить чаще.

<--TTT-->
юни
На сайте с 01.11.2005
Offline
902
#3

Для Гугла - зарегистрируйте сайт и в панели вебмастера переместите соответствующий ползунок на максимум ("Конфигурация сайта" -> "Настройки" -> "Частота сканирования" -> "Задать пользовательскую скорость сканирования").

https://a-parser.com/ - парсер для профессионалов SEO, маркетологов, арбитражников и SaaS, https://searchengines.guru/ru/forum/944108 - прокси-сервис на базе операторов домашнего интернета, сотни тысяч IP-адресов, канал от 20 Мбит
M1
На сайте с 07.02.2009
Offline
105
#4
Mr.Smile:
Ginger, Сделайте карту сайта, добавьте директиву crawl-delay: 0.1 в robots.txt (но только для Гугла и Яндекса). Расположите ссылки на быстроиндексируемых сайтах. Можете ещё использовать пинг сервисы. Старайтесь, что бы новые страницы были не дальше 1-2 кликов от главной. Если сайт будет часто обновляться, то и ПС будут заходить чаще.

А есть какой-то определенный сайт или сайты, куда можно делать rss новостей например со ссылками?

Сделайте карту сайта, добавьте директиву crawl-delay: 0.1 в robots.txt (но только для Гугла и Яндекса)

Есть смысл это делать, если не не располагать ссылки на чужих сайтах?

Mr.Smile
На сайте с 10.01.2011
Offline
65
#5
mpak17:
Есть смысл это делать, если не не располагать ссылки на чужих сайтах?

Есть конечно.

mpak17:
А есть какой-то определенный сайт или сайты, куда можно делать rss новостей например со ссылками?

Ага. RSS-агрегаторы (каталоги) называются такие сайты. Они действительно ускоряют индексацию!

Вот список русских:

RSS-lenta.ru - http://www.rss-lenta.ru/rss/add

RSSNews.org.ua - http://www.rssnews.org.ua/index/5.html

RSS.UkrNews.net - http://rss.ukrnews.net/reg.php

Zelenkov.net - http://www.rss.zelenkov.net/rss_add.php

RSSportal.ru - http://rssportal.ru/catalog/add

Prostir.kiev.ua - http://prostir.kiev.ua/index.php?nma=blog&fla=add

LiveRSS.ru - http://liverss.ru/

Headlines.Ru - http://www.headlines.ru/site/addrss/

RSSReader.ru - http://rssreader.ru/addfeed

Limpa.ru - http://www.limpa.ru/news.php?act=rssadd

Kanban.ru - http://www.kanban.ru/add.asp

News.Nofollow.Ru - http://news.nofollow.ru/?page=addrss

Plazoo.com - http://www.plazoo.com/ru/addrss.asp

Novost.org - http://novost.org/index.php?zi=38&chp=showpage&num=121

RPRW.ru - http://rprw.ru/addsource.shtml

LiteCat.com - http://litecat.com/?link=add

Izznet.com.ua - http://izzet.com.ua/index.php?nma=blog&fla=add

Blogowar.ru - http://blogowar.ru/register.php

LinkStore.ru - http://www.linkstore.ru/linkstore/promote.jsp

RSSLenta.ru - http://rsslenta.ru/registration

RSSNewser.ru - http://catalog.rssnewser.ru/

Subscribe.ru - http://subscribe.ru/faq/lenta/submitrss.html

Blogdir.ru - http://blogdir.ru/add_blog

Feed2.net - http://www.feed2.net/addrss

Blogus.ru - http://www.blogus.ru/add/Default.aspx

Kmstudio.com.ua - http://kmstudio.com.ua/index.php?nma=blog&fla=add

AlfaRu.com - http://alfaru.com/rss/addrss.html

Blagoslovenie.su - http://www.news.blagoslovenie.su/index.php?option=com_content&task=view&id=1620

Vsev.net - http://vsev.net/sites/services/rss/add_rss

UNIQ-ip.com - http://uniq-ip.com/c/online/rss

Oaya - http://oaya.ru/ru/addchannel.xhtml

Яндекс блоги - http://blogs.yandex.ru/add.xml

Блоги на inf.by - http://blog.inf.by/?page=65021

BlogRate - http://blograte.ru/

******** - http://www.********.ru/addurl.php

iBlogger - http://iblogger.ru/

MRSS - http://www.moben.ru/mrss/

News RSS Tu2 - http://news.rss.tu2.ru/new_rss_can.php

Catalog GPMV - http://catalog.gpmv.ru/add/1

Web100 Каталог RSS-каналов - http://rss.web100.kz/add-rss-feed.html

Directory MBlog - http://directory.mblog.ru/add.php

ДоброБот - http://dobrobot.com/

RSSDirectory - http://rssdirectory.ru/addfeed.html?catid=

ZSSN - http://rss.zssn.org.ua/

WWWomen - http://wwwomen.ru/s.php/2383.htm

RSS-Farm - http://rss-farm.ru/catalog.aspx

RSS Каталог http://www.no-nofollow.ru/

Prime RSS - http://www.prime-rss.ru/add.php

WorldRSS - http://www.worldrss.ru/addfeed.html?catid=

BlogRider - http://blogrider.ru/catalog/blogs/add

Google блоги - http://blogsearch.google.ru/ping?hl=ru

RSS Новостная поисковая система - http://rssbiz.ru/add_src/

RedTram - http://www.redtram.ru/pages/addsource/

Сабмит RSS - http://www.addrss.ru/

P.S. список немного устарел.... Но большая часть работает!

zozic
На сайте с 02.02.2011
Offline
43
#6
юни:
Для Гугла - зарегистрируйте сайт и в панели вебмастера переместите соответствующий ползунок на максимум ("Конфигурация сайта" -> "Настройки" -> "Частота сканирования" -> "Задать пользовательскую скорость сканирования").

А этот способ повредить не может?

юни
На сайте с 01.11.2005
Offline
902
#7

zozic, не думаю. Чему именно повредить? Разве что хостеру может не понравиться возросшая нагрузка.

zozic
На сайте с 02.02.2011
Offline
43
#8
юни:
zozic, не думаю. Чему именно повредить? Разве что хостеру может не понравиться возросшая нагрузка.

ну то уже как-бы его траблы .

Mr.Smile
На сайте с 10.01.2011
Offline
65
#9
юни:
Разве что хостеру может не понравиться возросшая нагрузка.

Можно через директиву crawl-delay в robots.txt снизить нагрузку от поисковых роботов.... Особенно от Яху....

G
На сайте с 14.12.2009
Offline
68
#10
Mr.Smile:
GingerРасположите ссылки на быстроиндексируемых сайтах. Можете ещё использовать пинг сервисы.

А разве пинг сервисы не для блогов в основном предназначены?

Поможет ли такой вариант: размещение анонса в блоге на ЖЖ (анонс не копирует содержание статьи, пишется отдельно) и ссылка "на полный текст", ведущая на страницу сайта? Или подействует только если у меня ЖЖ блог популярный?

Ginger добавил 19.02.2011 в 22:23

юни:
Для Гугла - зарегистрируйте сайт и в панели вебмастера переместите соответствующий ползунок на максимум ("Конфигурация сайта" -> "Настройки" -> "Частота сканирования" -> "Задать пользовательскую скорость сканирования").

А меня хостер не вырубит за такое? Я же вроде как увеличиваю нагрузку на сервер.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий