Форум Практика оптимизации Doorways & Cloaking

Парсер liveinternet.ru

1 234567 8
SM
На сайте с 02.07.2007
Offline
131
sasha_mtrx
#51

а при парсинге уже самой статистики так же используется буферизация и запись в файл после окончания работы?

будет ли скрипт работать если браузер закрыт?

найди путь для использования мира под свои нужды продается завод пищевой промышленности в Свердловской области!
.:nbd:.
На сайте с 04.11.2008
Offline
98
.:nbd:.
#52
sasha_mtrx:
а при парсинге уже самой статистики так же используется буферизация и запись в файл после окончания работы?
будет ли скрипт работать если браузер закрыт?

В последней версии кеи пишуться сразу в файл.

Нет, не будет. Можно добавить в код скрипта ignore_user_abort(1); сразу за первым тегом 

<?php
, но это не везде работает. Плюс в функции парсинга используется вечный цикл с выходом по условию и тайм лимит ноль =) Пока тестируем, что есть. Отписываем об ошибках, вопросах и предложениях.
Палю тему Дорген (/ru/forum/439165) + кеи + контент (http://datarama.biz/) + еще немного кеев и скриптов (http://amazingsoftware.ru/) = $$$ Мы делаем доры, а не пишем романы (c) один Дима рефка dino_spomoni (http://goo.gl/w62v3)
P
На сайте с 01.07.2006
Offline
71
Paulito
#53

ошибка Не могу писать в папку keys

хотя права на папку поставил...

что не так?

.:nbd:.
На сайте с 04.11.2008
Offline
98
.:nbd:.
#54
Paulito:
ошибка Не могу писать в папку keys
хотя права на папку поставил...
что не так?

Видимо все же не хватает прав на запись (попробуйте 777) или отсутствует папка keys =)

M
На сайте с 27.12.2007
Offline
63
Mustafallah
#55

Было бы не плохо еще сделать, скажем общую сумму заходов по тому или иному ключевому слову.

[Удален]
#56
.:nbd:.:
Короче говоря дописал маленький апдейт =)
Пасс от парсера стоит мильен рублей, для особо любознательных он лежит в conf/config.php, для особо ленивых, пасс - demo. Но советую хоть раз ошибиться в пассе, посмотреть картинку, ради нее весь парсер и писался =)

Спасибо, Друг :)

Картинка зачотна :)

S
На сайте с 13.06.2008
Offline
20
Sherh
#57

Апну топик.

.:nbd:., спасибо за скрипт.

Несколько позже, думаю добавить пару полезных фишек - проверка количества страниц с кеями до начала парсинга (чтобы не получилось так, что запустили парсить пару-тройку стат с несколькими тысячами кеев и сиди, гадай когда все это добро спарсится). И вторая - работа с файлами из окна (не всегда удобно лезть по фтп, чтобы подправить список для парсинга).

Помимо этого очень не хватает работы скрипта в фоновом режиме. Не всегда удобно держать браузер открытым. Особенно, если парсить много.

Slav Krivonos
На сайте с 08.12.2007
Offline
146
Slav Krivonos
#58

скачал, спасибо!

очень удобная вещь

• slav.ua (https://slav.ua) • Форум о бриллиантах (http://brillianty.net) • Бесплатно создай код ссылки за секунду: unlim урлов — unlim анкоров (http://useit.com.ua/mode3.html) • Проверка позиций за XML-лимиты (http://allpositions.ru/redirect/923) • Надёжный дешевый хостинг «Украина» (https://ukraine.com.ua/?page=196971)
converse19880604
На сайте с 31.05.2009
Offline
164
converse19880604
#59

скачал, сейчас попробуем по-парсить:)

заранее спасибо🍻

.:nbd:.
На сайте с 04.11.2008
Offline
98
.:nbd:.
#60

Хых, прияно, что кто-то им пользуется =) Раз так прикрутил к нему еще 2 феньки:

1) Вывод количества страниц статистики, чтобы не гадать когда же он наконец допарсит;

2) Возможность сохранять кеи каждого сайта в отдельный файл. Как показала практика, Яндекс любит отдавать в СЕРПе не совсем то, что искал серчер, соответственно иногда парсер сайтов с открытыми статами цепляет сайты не совсем соответствующие интереующей нас тематики.

Забрать последнюю версию можно здесь.

1 234567 8

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий