Xpyct10

Рейтинг
104
Регистрация
21.05.2009

кто скажет что бот хочет 3 раз приходити и уходит

66.249.71.38 - - [05/Jun/2009:18:15:53 +0400] "GET /robots.txt HTTP/1.1" 200 145 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

66.249.71.38 - - [05/Jun/2009:18:15:59 +0400] "GET /sitemap.xml HTTP/1.1" 200 251190 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

спс за подсказки пробовал через (ua) чето неполучилось а про кеш как его обнавляь несталкивался еще

о все нашел где он обнавляется

lehahehe:
Xpyct10, Нормально работает.

у меня вот что выдает

Not Found

The requested URL /stat.php was not found on this server.

exe2 спс за инфу будет полезно прочесть

как пришел так и ушел походу может с robots.txt я тупонул а то они что то быстро приходят пугаются и уходят

наро кто подскажет что это значит я в логах неас

87.250.241.75 - - [04/Jun/2009:04:51:16 +0400] "GET /robots.txt HTTP/1.1" 200 102 "-" "Yandex/1.03.003 (compatible; Win16; D)"

Кто то лёт сюда трафф http://www.lovecash.biz/ его что прикрыли уже 2 торй день немогу в админку попасть а трафф идет на эту партнерку

Народ может кто то подсказать что неправельно делаю сделал 2 недели назад штук 40 доров все добавил в социалке раствел по 3 ссылуки на каждый дор и все один быстроботом в индекс залител и то на пол дня если кому интересно могу в личку дор показать

bim7794:
первую страницу можно загнать в индекс через час после того как дор залил, и уже с этой первой страницы полусчать траф в размере 20-30 уников. Вот только при апдейте бывает вылетают, + мне как то это не очень нравится. имхо без быстро бота

этож каким образом его туда загнать за 1 час на сапе ссылок с пиаристых сайтов купить ??

Zaykin:
если робот яши попадет на страницу, на которой есть ссылка только на следующую страницу, и никуда больше, он перейдет по этой ссылке? если таких страниц будет очень много, до какой из них дойдет робот?
вы считаете, что вопрос не в ту ветку? да в ту, в ту:)

чего заморачиватся разве не легче в роботе тхт просто указать SiteMap

Всего: 251