Netpeak Spider - бесплатная программа для сканирования сайта

[Удален]
#41

Господа, обратите также внимание на другой наш полезный сервис - Prodvigator.

M5
На сайте с 12.08.2009
Offline
221
M25
#42

Обидно то как - не видно счетчика настройки глубины.

Полноэкранный.

► Рейтинг серверов — ТОП10 ◄
A1
На сайте с 22.09.2008
Offline
55
#43

Добрый день, мне нужно сделать оптимизацию сайта, закрыть зеркала, проверить редирект, и выявить ошибки если они есть. не могли бы мне помочь?

R
На сайте с 01.11.2013
Offline
9
#44

M25

простите, на данный момент всё, что я могу сделать это порекомендовать увеличить масштаб в Windows с 125% до 150%. Проблема нам известна.

Aleks1

я могу посоветовать вам оставить заявку на нашем сайте =)

Z
На сайте с 05.02.2010
Offline
82
#45

апну тему с вопросом по софту. Заметил, что тайтлы собранные спайдером не совпадают с тайтлами на сайте, с чем связано?

R
На сайте с 01.11.2013
Offline
9
#46

Хочу обратить внимание всех пользователей - у нас появился сайт на котором можно оставить свои отзывы о работе наших приложений:

http://community.netpeak.ua/

Пожалуйста используйте его, если у вас есть вопросы к разработчикам, вы хотите предложить идею или сообщить о проблеме. У меня не всегда есть возможность оперативно просматривать данный форум (сёрч).

zamuty,

нужен конкретный пример несовпадения, в идеале скриншот окна приложения на котором видно полный адрес страницы на которой обнаружена проблема и скриншот сайта (или исходного кода страницы). Не имея этих данных, я не могу дать грамотный ответ на поставленный вопрос.

pombur
На сайте с 17.04.2011
Offline
56
#47

Скажите пожалуйста, какой таймаут надо выставлять в программе, чтобы не было проблем с хостингом. Поставил по-умолчанию-45, заблокировали сайт.

R
На сайте с 01.11.2013
Offline
9
#48

pombur,

не совсем понял вопрос. Если при сканировании сайта приложением Netpeak Spider вы получили бан от хоста, то вам следует использовать 1 (максимум 2) потока для сканирования.

Настройка таймаута отвечает не за промежутки времени между запросами, а за то сколько времени запрос будет ожидать ответ от сервера.

pombur
На сайте с 17.04.2011
Offline
56
#49

Скорее всего мой сайт был заблокирован фаерволом из-за 5 потоков. А таймаут 45 это значит не время между запросами? А то у моего хостера если свыше 4 запросов в секунду с одного ip, то блокируют.

jpg 2014-02-20_181817.jpg
R
На сайте с 01.11.2013
Offline
9
#50
А таймаут 45 это значит не время между запросами?

Это время в течении которого поток будет ожидать ответ сервера, если в течении этого времени сервер не ответит, то соединение будет закрыто.

А то у моего хостера если свыше 4 запросов в секунду с одного ip, то блокируют.

Значит вам следует использовать не более 4 потоков, хотя я бы и вовсе ограничился 2-мя.

Так же, вы можете использовать прокси для этих целей.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий