Случайно раздел со статьями через роботс.тхт не закрыт? В e107 например такое по умолчанию.
Еще один апдейт. Почерневшие и закрывшиеся каталоги удалены, а так же добавлено пару десятков каталогов. На данный момент в базе 706 белых каталогов.
Небольшие особенности базы:
1) В базе нету каталогов расположенных на бесплатных хостингах.
2) В базе урлы каталогов сразу ведут на страницу добавления в каталог, за исключением некоторые каталогов где надо сначало зайти в раздел, а уже оттуда добавлять.
3) Быстрая доставка базы после оплаты.
И робот и человек получает страницу в ХТМЛ после генерации страницы на сервере. Сам ПХП код не видит робот.
А как они это могут скрыть? Заходите в раздел каталога смотрите какого вида ссылка стоит на сайты. Если вида http://site.ru то ссылка прямая и переходите к другим показателим в определении белости каталога, а если вида http://каталог.ru/redirect?http://site.ru то он не белый.
Раньше была выделенка, но сейчас перешел на стрим.
Слова "гдето" и "ну гдето" сразу дают понять на сколько эти данные точные. Написали бы честно например "Базу только собрал/перекупил и поэтому не могу сказать точные цифры"
Скинте информацию про методы в личку. Оплата 6 у.е за 100 тИЦ единоразовая?
Предлогаю свою базу. Вышлю 2 версии базы в .xml и .txt формате.
http://1ps.ru/web/a1.htm самый свежий список, только полчаса надо будет поработать, чтоб просто в список УРЛов превратилась.
2 дня назад стал Майн Кампф читать.
