PDA

Просмотр полной версии : Обмен ссылками - правда и ложь


KirillS
05.05.2003, 10:47
Мне довольно часто приходится обмениваться ссылками с различными сайтами. И вдруг недавно на одном из них я обнаружил очень неприятных файл robots.txt, в котором черном по белому было написано:

User-agent: *
Disallow: /страница с ссылками

Посему, а не создать ли нам на этом уважаемом форуме черный список сайтов, которые промышляют такими вещами?

Kost
05.05.2003, 13:17
А зачем? Просто каждый должен сам прежде чем меняться, посмотреть эти и другие вещи.

funnybunny
05.05.2003, 13:37
KirillS, не вижу проблемы, ссылку в addurl и вся недолга. А ждать что робот сам по этим страницам пройдется, это может занять до года как минимум из моей практики.

NULL
05.05.2003, 13:38
Как писал Kost
... каждый должен сам ... посмотреть ... эти и другие вещи.
Из других вещей вспоминается только <META content="NOINDEX, NOFOLLOW" name=ROBOTS>, а что еще?

NULL
05.05.2003, 13:41
ссылку в addurl и вся недолга
А получиться ли? Робот из-за записи
User-agent: *
Disallow: /страница с ссылками
вроде не должен будет эту страницу индексировать.

funnybunny
05.05.2003, 13:44
NULL, у меня были такие случаи, все проходило ОК

NULL
05.05.2003, 13:47
funnybunny, я в полном недоумении! "Такого не должно быть, потому что такого не должно быть никогда"! :confused:
KirillS, попробуйте засабмитить страницу с ссылками в Яндекс и Гугль - что они скажут?

funnybunny
05.05.2003, 13:50
NULL, (чешу в затылке) Вспомнить много сходу не могу, но я имел беседу с мастером нефтегаз точка ру У них весь раздел ссылок запрещен. Руками внес в addurl и Яндекс ссылки увидел. Так вот

NULL
05.05.2003, 13:55
KirillS, отбой воздушной тревоге, ничего там не запрещено, посмотрите где живут ссылки и что написано в robots.txt
P.S. Для ресурса с тИЦ=1600 и 600-ми ссылающимися серверами такое запрещение действительно выглядит нелепо ...
Кирилл, последуйте совету funnybunny - бросьте url в Яндекс и иже с ними и Вас можно будет поздравить "с удачным приобретением" :)

NULL
05.05.2003, 14:06
ops ... беру свои слова обратно - действительно запрещено ... конфуз, однако

Cherny
05.05.2003, 14:09
NULL, робот I Яндекса индексировать не должен и не будет, а вот скрипт добавления и соответствующий робот (D) в robots.txt не заглядывает, поэтому такой маневр добавления страницы через addurl может пройти. Где-то полгода назад было обсуждение этого вопроса.

KirillS
05.05.2003, 14:18
Но страница-то уже давно зарегистрирована. На addurl - ответ, что страница уже известна роботу...

funnybunny
05.05.2003, 14:21
KirillS, придет и увидит, не переживайте. Составьте список для себя и изредка его в addurl ручками.

KirillS
05.05.2003, 14:24
Спасибо за совет

NULL
05.05.2003, 14:28
поэтому такой маневр добавления страницы через addurl может пройти
Хм... с другой стороны - а сколько такая ссылка проживет? Индексатор Yandex/1.01.001 (compatible; Win16; I), до нее добраться не может, в базу попадет с помощью Yandex/1.01.001 (compatible; Win16; D) - и сколько она там продержится без обновления? Или ее всю жизнь надо будет "изредка в addurl ручками"? funnybunny, Вы об этом говорили?

funnybunny
05.05.2003, 14:35
NULL, Из моей скромной практики, ссылки внесенные таким образом более устойчивы.
Есть такие с возрастом около 8 месяцев. Но руками я их изредка освежаю, на всякий пожарный ;)

Cherny
05.05.2003, 14:53
и сколько она там продержится без обновления?
Пока вебмастер не заметит и не удалит. Опять же ручками. :)
Автоматом могут долго удалять.

Kost
05.05.2003, 14:54
Из других вещей вспоминается только <META content="NOINDEX, NOFOLLOW" name=ROBOTS>, а что еще?
<noindex>
.....ссылки тут ...
</noindex>
А также "кривые" ссылки через скрипты, маскируемые в статусной строке. "Кулибиных" у нас немало.

LiM
10.05.2003, 22:03
Господа, вместе с попытками решить вопрос своими силами предлагаю написать web-мастеру того сайта письмо, где вежливо попросить сделать так, чтобы страница индексировалась роботами.
Если это не поможет, надо делать выбор насколько ценна ссылка сама по себе (без индексации ее роботом).
В конечном счете, всегда можно в одностороннем порядке расторгнуть договоренность об обмене ссылками...