А какой суточный трафик у каждого сайта?
Скажите, а есть у вас для iphone трафика не порно лендинг?
Практически любой хостинг предоставляет эту услугу, например Агава
Есть и другие мнения на этот счет, по этому я и написал, что это риторический вопрос
это уже риторический вопрос, по идее ноиндекс говорит ПС, что эту часть кода смотреть и учитывать не нужно, а как на самом деле относится ПС к этому тегу, это уже другой вопрос. Кстати Яндекс сам на своих сервисах так закрывает ссылки. С него и берут пример.
Вы плохо смотрели на холодильник. Они так делают для управления распределением веса по внутренним страницам. На главной они закрыли левое меню, так как оно дублирует верхнее меню, тоесть вес пойдет с главной только через верхнее меню. Далее откройте страницу раздела, например - http://holodilnik.ru/refrigerator/, вес сюда пришел с главной, а куда ему дальше идти? Смотрите - закрыты все ссылки кроме ссылок на подкатегории, тоесть они хотят, чтобы вес с страницы категории пошел только на ее подкатегории, а не на соседние категории и еще хрен знает куда. Ну и дальше смотрите сами, как они вес распределяют.....понятно изложил?
У джумлы есть sh404SEF, который автоматом убирает все дубли и отдает только ЧПУ страницу. Остаются только всякие приписки, типо
site.ru/page.html?comment_sdffg
А вот у битрикса ничего подобного нет, нужно писать спциальые заплатки что бы избавиться от кривых урлов
Думаю, что никто не сможет вам помочь в парсе этого раздела, так как там нет ссылок на карточки товара Яндекс.Маркета, а есть простые ссылки на сайты участников системы. То есть, все товары сверстаны по разному, значит автоматизировать парсинг не получится, или получится, но структурировать полученную информацию точно не выйдет, то есть в лучшем случае вы сможете получить копии эти страничек в html. Лучше найдите крупный интернет магазин этой тематики, вот его можно будет спарсить элементарно!
Отправил отчеты на почту. Я более подробно прошелся руками по урлам, на которых программа не обнаружила ссылку, и правда кое где ссылки есть, но у большинства их нет...
Проверяю программой - LinkBek_Pro, выборочная ручная проверка подтвердила результат.......могу выслать подробный отчет проверки в екселе, может нужно допрогнать?---------- Добавлено 26.08.2012 в 01:36 ----------
да, тоже 0 ........ но на него мне пох ) да и на ТИЦ сайтов за 50$ тоже пох )) нулевики тоже ТИЦ дают, если не заспамлены ссылками конечно