Полный ребрендинг магазинчика. Новые скрипты, новые возможности.

1 234 5
S8
На сайте с 26.09.2008
Offline
45
#21
Удивительно:
Программа десктопная

Стоимость уже определена?

Удивительно
На сайте с 07.07.2009
Offline
215
#22
vestal:
то есть для глубоко парсинга урл будет выглядеть например так

http://mysite.com/wordstat/parser.php?sleep=20&deep=on&from=30&to=10000000

постаивила на обычный парсинг полчасика назад (на крон каждые пять минут) пока по нулям, выдаются предупреждения

Warning: fgets(): supplied argument is not a valid stream resource in /var/www/vhosts/site.com/httpdocs/wordstat/parser.php on line 388

Warning: feof(): supplied argument is not a valid stream resource in /var/www/vhosts/site.com/httpdocs/wordstat/parser.php on line 387

На крон каждые 5 минут ставить не нужно - вы каждые пять минут запускаете один и тот же процесс

Лучше запустить его в кроне единоразово и дождаться окончания работы

Насчет ошибок - создайте пустой файл proxies.txt в каталоге со скриптом и ошибки исчезнут.

Удивительно добавил 15.08.2009 в 13:22

Smile8979:
Стоимость уже определена?

Да, стоимость определена - 29$.

Сейчас дописывается документация и проводятся последние тесты.

Качественная семантика недорого ( https://moab.tools/ )
[Удален]
#23

создала пустой файл с проксями, ошибки исчезли, теперь вот что:

Запрос сиськи письки - парсим страницу 1

Warning: curl_setopt() [function.curl-setopt]: CURLOPT_FOLLOWLOCATION cannot be activated when in safe_mode or an open_basedir is set in /var/www/vhosts/mysite.ru/httpdocs/wordstat/parser.php on line 224

На странице 1 нет информации для парсинга

Парсить основные запросы закончили. Теперь распарсиваем...

и все, скрипт больше ничего не делает, хелп ми:)

Удивительно
На сайте с 07.07.2009
Offline
215
#24
vestal:
создала пустой файл с проксями, ошибки исчезли, теперь вот что:

Запрос сиськи письки - парсим страницу 1

Warning: curl_setopt() [function.curl-setopt]: CURLOPT_FOLLOWLOCATION cannot be activated when in safe_mode or an open_basedir is set in /var/www/vhosts/mysite.ru/httpdocs/wordstat/parser.php on line 224
На странице 1 нет информации для парсинга
Парсить основные запросы закончили. Теперь распарсиваем...

и все, скрипт больше ничего не делает, хелп ми:)

у вас на VDS включен safe mode и/или open_basedir

варианта 2:

1. отключите их или попросите хостера отключить

2. закомментируйте строку 224 в файле parser.php (поставьте перед ней //)

во втором случае вы, скорее всего, не сможете пользоваться прокси

[Удален]
#25

спасибо! значит буду с хостером воевать, потому что в php.ini safe mode отключен и open basedir закомментирован, видать на их стороне нужно что то отключать

Удивительно
На сайте с 07.07.2009
Offline
215
#26
vestal:
спасибо! значит буду с хостером воевать, потому что в php.ini safe mode отключен и open basedir закомментирован, видать на их стороне нужно что то отключать

честно говоря - не сталкивался с такой ошибкой

кажется, это где-то в конфигах апача настраивается, но утверждать точно не могу

если критично - спросите в топике "Веб-строительство" - там точно помогут разобраться :)

[Удален]
#27

закометила строку 224, теперь вот что происходит:

Время начала: 12:11

Запрос сиськи - парсим страницу 1

На странице 1 нет информации для парсинга

Парсить основные запросы закончили. Теперь распарсиваем...

O
На сайте с 06.11.2008
Offline
23
#28
vestal:
закометила строку 224, теперь вот что происходит:

Время начала: 12:11

Запрос сиськи - парсим страницу 1
На странице 1 нет информации для парсинга
Парсить основные запросы закончили. Теперь распарсиваем...

Это бывает, когда не удалось подключиться к вордстату (к примеру, когда у сервера нет подключения к интернету или если попался глючный прокси). Должно решаться простой проверкой, есть ли на загруженой странице хоть какая-то информация или нет

[Удален]
#29
ozmail:
Это бывает, когда не удалось подключиться к вордстату (к примеру, когда у сервера нет подключения к интернету или если попался глючный прокси). Должно решаться простой проверкой, есть ли на загруженой странице хоть какая-то информация или нет

парсю без прокси, к интернету подключение есть

vestal добавил 15.08.2009 в 15:25

кстати точно такая же фигня на денвере

http://localhost/wordstat/parser.php?sleep=20&deep=on&from=0&to=10000000

Время начала: 18:22

Запрос сиськи - парсим страницу 1

На странице 1 нет информации для парсинга

Парсить основные запросы закончили. Теперь распарсиваем...

Удивительно
На сайте с 07.07.2009
Offline
215
#30

Файл с ключевиками, которые вы отправляете на автоматический парсинг, должен быть в кодировке UTF-8. Возможно, проблема в этом.

Если проблема не решится - стучите в асю, будем решать конкретно по месту.

1 234 5

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий