Кнопочку нашел, спасибо :)
По Рамблеру. Все настройки по умолчанию, только менял количество страниц и глубину (с5/г1, с1/г5 и т.д.), и так гонял раз пять подряд один и тот же запрос, но IP заблокировали примерно через час после этого, когда стал прогонять другой запрос с с5/г1.
Большое спасибо за программу! Очень полезная, можно сказать агрегатор агрегаторов :) если бы еще и ссылки покупала :)
Но как всегда есть несколько пожеланий:
1. Сообщать когда Рамблер забанил IP, сейчас задача просто запускается и сразу заканчивается.
2. Сделать возможность скрывать неиспользуемые колонки.
3. Показывать количество отобранных фильтрами запросов.
User-agent: *
Disallow: /?id_news
Закрываются все адреса начинающиеся с /?id_news
и так /?id_news=36&pg=
и так /?id_news/news1.html
Более подробная информация здесь http://help.yandex.ru/webmaster/?id=996567
Если сайт новый, то будет идти в топ по вч полгода-год, сч-нч выйдут раньше. Поэтому сначала его лучше прокачивать полгода, а потом уже вкладываться по серьезному.
Оплата за результат, это сейчас модно, но кто за свой счет ссылки будет закупать? Только если простой запрос, чтобы за 100 рублей вышел.
http://home.snafu.de/tilman/xenulink.html
Заказывал несколько дизайнов для сайтов с разной тематикой, все сделано на отлично! Рекомендую.
Эта программа проходит по всем ссылкам на сайте, находит битые ссылки, показывает рабочие страницы, всю информацию можно выгрузить в txt и потом обработать в экселе.
Что имеется ввиду под полным парсингом и парсингом ответов?
Как подключать прокси с логином и паролем?
Пользуюсь услугами Василия более полугода - очень доволен индивидуальным подходом, быстротой отклика на заявку и уникальностью работ. Более того, хочется отметить, что кроме перечисленных работ Василий прекрасно справляется с иллюстрациями. Всем рекомендую.
Являясь одним из первых пользователей сервиса, выражаю благодарность за создание и разработку максимально эффективных опций, которые в полном объеме удовлетворяют мои ожидания от программы подобного уровня и оптимально четко справляются с поставленными задачами, как по объему и качеству, так и по затратам времени. Кроме того, я считаю, что цена является обоснованной для программы такого уровня.
