да нет это не то, ты про intim.pp.ru что ли? там такого давно нет, а с 1м сайтом все окей!!!
еще примечательно что щас по запросу интим товары sexmarket.ru стоит на 3й месте, я то стоял на 1м-2м... аха - КОНКУРЕНЦИЯ! Вот в чем дело) а дорвей это только предлог))
еще когда готовил материал брал контент с разных сайтов, sexmarket.ru написал чтобы я ссылку поставил, что я у них статью тискнул, и грозились принять вслучае не установки их копирайта меры, а я вообщем забил... Может это из-за контента все????
Я готов поставить ссылки, копирайты, меня простят???
1й сайт clever.pp.ru востановлен в поисковике ура, яндекс молодец :)
2й сайт intim.pp.ru по прежнему дорвей какой-то, я вроде как нашел в чем загвоздка, написал в яндекс об этом...
На моем сайте есть ссылки редиректы на магазины, т.е.
http://intim.pp.ru/shop/go.php?1
http://intim.pp.ru/shop/go.php?2
и т.д.
а там php-редирект через хеадер, т.е. сразу:
header("Location: http://www.sexydreams.ru/index.php?partner=3048");
Но посетители просто переходили по ссылкам, а робот вполне понятно
принял это дело за редирект, теперь я эту ошибку закрыл следующим
образом, прописал в robots.txt:
User-Agent: *
Disallow: /shop/
Host: intim.pp.ru
После этого смотрел в логах:
213.180.216.2 - - [17/Oct/2005:01:28:18 +0400] "GET /robots.txt HTTP/1.1" 200 52 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:18 +0400] "GET /isubs/unsubscribe.php HTTP/1.1" 200 1424 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:19 +0400] "GET /igoods.php?12 HTTP/1.1" 200 25658 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:20 +0400] "GET /igoods.php?13 HTTP/1.1" 200 30346 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:20 +0400] "GET /igoods.php?10 HTTP/1.1" 200 28781 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:21 +0400] "GET /igoods.php?11 HTTP/1.1" 200 24691 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:21 +0400] "GET /igoods.php?16 HTTP/1.1" 200 28658 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:22 +0400] "GET /igoods.php?17 HTTP/1.1" 200 25839 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:22 +0400] "GET /igoods.php?14 HTTP/1.1" 200 28440 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:23 +0400] "GET /igoods.php?15 HTTP/1.1" 200 30540 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:23 +0400] "GET /igoods.php?18 HTTP/1.1" 200 27322 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:24 +0400] "GET /igoods.php?19 HTTP/1.1" 200 26699 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:24 +0400] "GET /igoods.php?27 HTTP/1.1" 200 24784 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:25 +0400] "GET /igoods.php?26 HTTP/1.1" 200 24991 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:25 +0400] "GET /igoods.php?25 HTTP/1.1" 200 24933 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:26 +0400] "GET /igoods.php?24 HTTP/1.1" 200 25533 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:27 +0400] "GET /igoods.php?23 HTTP/1.1" 200 26041 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:27 +0400] "GET /igoods.php?21 HTTP/1.1" 200 29320 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:28 +0400] "GET /igoods.php?20 HTTP/1.1" 200 27094 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:28 +0400] "GET /comments.php?id=12 HTTP/1.1" 200 931 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:29 +0400] "GET /mail.php HTTP/1.1" 200 1466 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:29 +0400] "GET /igoods.php HTTP/1.1" 200 26760 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:30 +0400] "GET /igoods.php?5 HTTP/1.1" 200 29839 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:30 +0400] "GET /igoods.php?4 HTTP/1.1" 200 26177 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:31 +0400] "GET /igoods.php?3 HTTP/1.1" 200 24893 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:31 +0400] "GET /igoods.php?2 HTTP/1.1" 200 27350 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:32 +0400] "GET /igoods.php?9 HTTP/1.1" 200 31209 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:32 +0400] "GET /igoods.php?8 HTTP/1.1" 200 26645 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:33 +0400] "GET /comments.php?id=4 HTTP/1.1" 200 930 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:33 +0400] "GET /comments.php?id=5 HTTP/1.1" 200 3838 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:34 +0400] "GET /comments.php?id=6 HTTP/1.1" 200 930 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:34 +0400] "GET /comments.php?id=1 HTTP/1.1" 200 1240 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:35 +0400] "GET /comments.php?id=2 HTTP/1.1" 200 1811 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:36 +0400] "GET /comments.php?id=3 HTTP/1.1" 200 930 "-" "Yandex/1.01.001 (compatible; Win16; I)"
213.180.216.2 - - [17/Oct/2005:01:28:36 +0400] "GET /comments.php?id=9 HTTP/1.1" 200 1397 "-" "Yandex/1.01.001 (compatible; Win16; I)"
робот все нормально забирал, но потом пришло письмо от саппорта:
Вам кажется, что Вы нашил проблему. На самом деле она не устранена.
=(
Кто знает в чем проблема? Хотя бы догадки?
Ура проиндексировалась наконец-то первая страница сайта clever.pp.ru
http://www.yandex.ru/yandsearch?serverurl=clever.pp.ru
Что самое интересное в поиске сайта не нашел: http://www.yandex.ru/yandpage?&q=46316033&p=1&ag=d&qs=ras%3D1%26date%3D%26text%3DPHP%2B%25u0441%25u043A%25u0440%25u0438%25u043F%25u0442%2B%25u043F%25u043E%25u0447%25u0442%25u043E%25u0432%25u043E%25u0439%2B%25u0440%25u0430%25u0441%25u0441%25u044B%25u043B%25u043A%25u0438%2BClever%2BSubscribe.%26linkto%3D%26lang%3Dall%26within%3D0%26from_day%3D%26from_month%3D%26from_year%3D%26to_day%3D15%26to_month%3D10%26to_year%3D2005%26mime%3Dall%26Link%3D%26numdoc%3D50%26site%3D%26ds%3D
Тотальная пессимизация?
Вопрос открыт =(
Затем intim.pp.ru по прежнему дорвей, офигеть =(
Саппорт утверждает что: "На сайт мы заходили и проверяли."
ПЛИЗ Кто-нибудь может объяснить почему он дорвей??? )
нет.
гы, когда писал не было ( не устраивало... не важно...
хах, аналогично, яндекс говорит что это дорвей прикинь?
P.S. Дорвеи (doorway, (англ.) дверной проем, пролет, раствор двери; вход в помещение, портал) - страницы сайта, специально созданные для получения посетителей с поиковых машин по определенным запросам. Цель создания дорвея - попасть в первые ряды результатов поиска и получить посетителя на страницу дорвея. Далее посетитель переводится внутрь сайта.
дык, 1.5 назад я это дело пофиксил простым выставлением прав 444 на текстовую базу со ссылками и уже давно нельзя обмен автоматический вести, так что отметаеца, если бы робот действительно индексировал сайт, а понимаешь не индексирует он =(((
Ссылок море, репутация у сайта замечательная - а индексировать типа все равно не буду, бред =(
ну мало ли скриптов таких, это обмен ссылками, заполняешь форму она автоматом все проверяет и добовляет ссылку, обычный самописный скрипт, защищенный ;) где там спам ты видишь? были случаи оставляли всякую чепуху хакеры =( но тот баг я исправил ~ 1.5 месяца назад и все нормуль, так что не надо ляля, да и это не повод что бы наказывать такой полезный между прочим сайт -)
остроумно... нет видишь ли это дорвей оказываеца, да да и не удивляйся, самый дорвейный дорвей в рунете, учись лабух ;) ... не ну серьезно бред полнейший =(