LEOnidUKG

LEOnidUKG
Рейтинг
1776
Регистрация
25.11.2006
Должность
PHP
Интересы
Программирование

ИМХО всё проще.

У пользователя стоит ГуглоБар, он зашёл на Ваш сайт, потом ошибся страницей, ну чёт не правильно вбил, ему выдалось 404, а гуглобар отправил боту, мол проверь что за страница там.

l1nker:
Первому покупателю, комплект AllSubmitter 5.3 + база каталогов достанется всего-лишь за 105$! Спешите!

А что за база каталогов то?

kalypah:
LEOnidUKG,
Юзер агент
Yahoo - Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)
Goggle - Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
MSN - msnbot/1.1 (+http://search.msn.com/msnbot.htm)
Yandex - Yandex/1.01.001 (compatible; Win16; I)


И т.п.
Проверка идет не по IP а по наличию Googlebot, msnbot, Yandex и т.п. в считанном Юзер-агенте.
Таким образом я писал для сайтов своих счетчик посещения ботами, в задачи ТС аналагочно, только разная отдача контента.

:D Читаем мой пост выше и ещё раз, медленно и внятно. Особенно уделяем внимание предложению:

Боты ходят и не представляются.

А то что ваш скрипт отлавливает, эт обычные боты для индекса, для бана и т.п. другие ходят.

Лучше "Купить" т.к. я прихожу на инет-магазин, покупать, а не в корзинку складывать :)

kalypah:
Читайте сначала
$USER_AGENT=$_SERVER[HTTP_USER_AGENT];
if (stristr($url, 'yandex')) {show='no';}
elseif (stristr($url, 'Yahoo')) {show='no';}
elseif (stristr($url, 'googlebot')) {show='no';}

А в месте где должны отображаться ссылки такой код

if(show!='no) {echo 'Ссылка 1 и т.п.';}

в топку. Боты ходят и не представляются. А ещё, никто не знает все IP ботов ПС , поэтому и БАНят за этот метод.

6. Каталог не должен работать в автоматическом режиме

Для того что бы анкоры и ссылки были оформленны грамотно а не как попало. +защита от спамеров. Я на своих каталогах вообще убрал ссылку на добавление сайта в каталог.

Чёт я смысла последнего предложения не понял.

Вообще моё ИМХО, чтобы каталог был для людей, там должен быть не только каталог. Да дизайн и текста, это всё правильно, но нужно положить какую-то изюминку туда. Если за ней правильно ухаживать, то вырастит вполне нормальный каталог, на котором можно сшибать бабло, конечно не мульён, хотя... как прорастёт :)

LEOnidUKG добавил 29.11.2008 в 23:29

lostik:
ДА каталог с обменном ссылок поставь да и все и проверяй иногда его

Да ну? Поспорю, что заспамят)))) тотже 1ps ))))

Тут жёсткая предмодерация, стоп слова, каптча, чтобы было расширенное описания больше 350-500 символов, считать запятые, проверка использования урла в описании и т.п.

forcekir:
Я понимаю что это черные методы, просто на самом деле таких сайтов около 10-15 и везде ссылки не проиндексированы..
Вот хотелось разобраться...
Меня сейчас больше интересует такой вопрос как это реализовано..
Я смотрю на код страницы он чистый никаких запретов..

скажу на вскидку.... там 3-4 строчки кода ПХП и в .htaccess куча IP ПС к запрету на просмотр каталога.

Ins1ght:
через Вебмастер Яндекса в основном

Ну Яшка у нас своеобразный, показывает только угодные ему бэки да и то ИМХО не все. Лучше смотреть через Язл программу, которая берёт бэки из разных поисковиков.

Так же нужно учитывать, что каталоги умирают, закрываются их банят и т.п. это уже не в нашей власти, чтобы держать количество каталожных бэков мы и придумали услугу "абонемент". Примерно 50-100 новых каталогов в месяц.

forcekir:

Назрел такой вопрос к программистам, можно ли организовать такой скрипт каталога ссылок, чтобы например при заходе в него обычным людям ссылки нормально отображались, а для робота ссылки были не видны...

Это называется клоакинг и за это банят

bv1986:
Если проверять код сайта на этом сервисе http://validator.w3.org ( встроен в Ашманова) , выдает гору ошибок .

Вопрос уважаемые знатоки )

Стоит ли их исправлять все и вообще на сколько эти ошибки влияют на позиции сайта и тд если вообще влияют .

забейте! Потратьте время лучше на наращивание ссылочной массы и на развитие сайта.

Всего: 31516