alexseo, а чем закончилась ситуация? Имхо сейчас дорвеями тогда можно назвать:
*агрегаторы новостей
*некоторые очень большие и посещаемые сайты о недвижимости
*те же каталоги сайтов
*каталоги товаров
Все это в какой то мере дорвеи.
Что-то слабо верится, что все это можно забанить?
Zerex, sweb.ru - все написано. не перепечатывать же сюда рекламу :-)
аспирин, намучился из-за чего? какого плана были проблемы?
ZeHer, по теме...
В данном случае гораздо лучше отработает Бегун, имхо. Адсенс может буть как заглушка до то момента как тысяча хостов наберется.
со sweb.ru никаких (почти) проблем.
а вот про мажодомов очень много в нете нехорошего пишут :-(
sweb.ru недавно поднял ограничения для шаредхостинга.
Мне кажется за эти деньги - свеб лучшеее, что может быть.
ZeHer, а можешь еще назвать лент с полнотекстовыми новостями? ;-)
у мееня на локальном компе уже тоже работает rss-агрегатор, правда я еще не озаботился нормальным сбором базы каналов.
Интеерсная фишка. В указанном канале новости и на русском и на украинсокм, причем идентификатора языка нету :-( Интересно - это нормально для укрнета?
А по поводу удаления новостей- лучше все таки сделать архив и помещать туда новости с определнной стпенью старости.
maximumx, подскажите ресурсы где можно утащить по rss новости с полным текстом :-) Буду офигенно благодарен.
Ну забанит гугл, ну и фик с ним... в рунете он все равно не рулит :-)
Да и для западнонета тоже можно сделать так, что на прародителя кроме нижгнего блока submit ничего не будет похоже.
А за то что люди ставят себе скрипт за 10 мин и типа уже крутые каталогеры ("4 млн сайтов") и надо банить. Смысла нет в таких каталогах.
netUfo, Это очень хорошо для России.
наверное удачное место выбрал.
Sehnsucht, yaca закрыт для бота Яндекса - это уже обсуждали.
User-Agent: yandex Disallow: /yaca/ Disallow: /yandsearch Disallow: /yandpage Disallow: /norobot Disallow: /yca Host: yaca.yandex.ru User-Agent: * Disallow: /yaca/ Disallow: /yandsearch Disallow: /yandpage Disallow: /norobot Disallow: /yca/geo Disallow: /yca/src Disallow: /yca/addr Disallow: /yca/sect Disallow: /yca/genre Disallow: /yca/spos Disallow: /yca/onl Disallow: /yca/trg Disallow: /yca/sft Disallow: /yca/xxx Disallow: /yca/synt Disallow: /yca/grp Disallow: /yca/rgrp Disallow: /yca/ungrp Disallow: /yca/tungrp Disallow: /yca/time Disallow: /yca/alf Disallow: /yca/cy Disallow: /yca/narod Disallow: /cy
Кстати по уму сделанные каталоги - это набор из N числа дорвеев, где N равно числу сайтов.
Причем на страничке сайта совершенно не обязательно спамить. Надо просто все сделать как пишут в учебниках - титл, дескрипшн, h1
А по поводу банить - вполне возможно. Хотя и очнеь странно это будет :-( Но уже сейчас иногда набираешь нетипичный запрос, а на первой странице 6-8 каталогов :-)
