Yahooo: Нужно прогнать гуглом список из 7 млн. слов и фраз и получить по каждому запросу количество, которое он выдаст (то, которое над результатами пишется). Недавно написал свой парсер на php, около 100000 слов он отпарсил за несколько недель (юзал прокси). Но 7 млн. это будет очень долго. Посоветуйте, какие есть варианты решения такой задачи. Готов заплатить.
Можно Хуман эмулятором без проксей и в многопоток спарсить. Капчу если будет выдавать распознавать через антигейт.
А свой PHP скрипт запустить в несколько потоков (сделать копии в разные папки) не получится?
Сегодня был найден баг и исправлен. У кого не сохранялись RSS ленты в блогах, а так же в общей базе RSS, закачайте заново дистрибутив фермы из ПУ на компьютер из него возьмите только файл install.php. Залейте его в папку с Я.ру фермой, запустите, заполните форму и нажмите кнопку установить. На ошибки внимание не обращать. После этого файл install.php можно удалить.
Сегодня появился адекватный отзыв на одном форуме от одного человека, который около 5 прогонов заказал уже. Почитать по адресу www.maultalk.com/topic159150.html?view=findpost&p=1692855 можно.
Помимо прогона сейчас в услугу входит пропинговка адресов со статьями, а так же добавление их в Яндекс AddURL.
Так же на данный момент КУ на всех блогах не менее 20.
GKC: Хорошая статья + еще и с правильным сео - думаю баксов на 10 минимум потянет. умножаем на 1000 получаем 10к$... И кто даст вам такой "багаж" для эксперимента с вашим стремным методом.. не смешите мои подковы...😂
Я имел ввиду качественно размноженные статьи, желательно с трех (и более) различных статей и правильно подобранными анкорами.
Всем кто заказывал прогон, помимо пропинговки странц, сегодня добавил в Яндекс AddURL.
akigleo: Вопрос имел совсем простой смысл. Например, скрипт установлен на site.ru. Как приятный побочный эффект работы вашей пингалки было бы здорово иметь возможность скачать свежечеканые прокси по адресу site.ru/proxy_list.txt для использования в сторонних приложениях. Так сказать скрипт - два в одном. ☝ Это как пожелание.
Возможно кого-то огорчил ваш пост. Нужно понять и пгростить. :)
По поводу приобретения отпишусь вам в личку, так как ICQ не пользуюсь.
Ответил Вам в ЛС. У меня есть такой принцип, что всегда всем помогаю со всеми своими скриптами + всегда готов выслушать предложения по улучшению скриптов и пожелания, т.к. я только за здоровую конкуренцию.
nesterdron: Траст...что это такое? Какая от него польза?
Создал 3К блогов и не было желания прогнать свой сайт по блогам?
Просто,как то не айс заказывать прогон,если не знаешь что он дает
Раньше тут была услуга 1000 блогов с размножением и написанием статьи Если честно,толку особо от того прогона не заметил (в индексе 950 блогов уже год) Потому и спросил,чего ожидать от прогона
Былобы лучше сначала прогнать свой сайт,посмотреть на результат Если прогон дает рост трафика Выложить в теме график роста и тд
Тогда и услуга пойдет веселее А так...
На счет тарста (по xtool.ru) скопирую с их сайта, думаю понятно, - Алгоритм траста xt предназначен для анализа способностей страницы/сайта как донора. Выше трастовость XT - лучше ссылочный донор.
На счет второго, - хорошо, сделаю такой эксперимент.
Но для этого мне нужен человек, у которого есть средний сайт, не под фильтрами. Еще мне нужно от него 0,5-1к хороших статей с правильно подобранными анкорами. Этот прогон сделаю бесплатно.
akigleo: Любопытный скрипт.
Я так понял, что помимо самой пинговалки есть еще сбор прокси. А они могут регулярно записываться в файл на сервере, чтобы при желании их можно было использоваться для других целей?
Да, сбор проксей есть, через крон файл, который парсит указанную страницу и записывает в базу данных. Не понял вопроса на счет "чтобы при желании их можно было использоваться для других целей?". Если необходима нестандартная какая-то функция, то пишите, реализую.
---------- Добавлено 17.10.2013 в 14:04 ----------
Я много читал как тут минусует ни за что, на себе сегодня ощутил - минус 811 в репу пришло за эту тему от анонима.
Данный скрипт оптимизирован очень хорошо, памяти 7 метров жрет при пинге и многопоточность кушает 0,3-1,5% процессорного времени.
Или здесь таким способом конкурентов пытаются убрать?
Ответ на вопрос: "ТС,какой результат замечен от прогона по 3к блогов?", я если често не знаю, пока 1 человек заказывал прогон по 2,5 к блогов со скидкой 50% за отзыв. Можно будет узнать результат, как сами понимаете, через несколько апов.
Но скажу сейчас от себя (делал прогон по 330 блогам своего сайта), прирост по особо неконкурентным НЧ и СЧ будет, так же прирост траста по xtool, разбавление ссылочного и рост авторитетности в рейтинге блогов рунета (если прогоняемый сайт в нем присутствует).
Но сами должны понимать что по большей степени результат сейчас зависит от предоставленных статей, а так же правильно подобранных анкоров в них.
За свои блоги, о которых Вы отозвались отрицательно, я дорожу и не позволяю публиковать в них как Вы сказали "спам", т.к. делал их от души и на совесть, на которые потратил немало времени, притом что стали они такими как есть не без помощи хумана эмулятора.
Нужно прогнать гуглом список из 7 млн. слов и фраз и получить по каждому запросу количество, которое он выдаст (то, которое над результатами пишется). Недавно написал свой парсер на php, около 100000 слов он отпарсил за несколько недель (юзал прокси). Но 7 млн. это будет очень долго. Посоветуйте, какие есть варианты решения такой задачи. Готов заплатить.
Можно Хуман эмулятором без проксей и в многопоток спарсить. Капчу если будет выдавать распознавать через антигейт.
А свой PHP скрипт запустить в несколько потоков (сделать копии в разные папки) не получится?
Сегодня был найден баг и исправлен. У кого не сохранялись RSS ленты в блогах, а так же в общей базе RSS, закачайте заново дистрибутив фермы из ПУ на компьютер из него возьмите только файл install.php. Залейте его в папку с Я.ру фермой, запустите, заполните форму и нажмите кнопку установить. На ошибки внимание не обращать. После этого файл install.php можно удалить.
Сегодня появился адекватный отзыв на одном форуме от одного человека, который около 5 прогонов заказал уже. Почитать по адресу www.maultalk.com/topic159150.html?view=findpost&p=1692855 можно.
Помимо прогона сейчас в услугу входит пропинговка адресов со статьями, а так же добавление их в Яндекс AddURL.
Так же на данный момент КУ на всех блогах не менее 20.
Vladimir-AWM, все хотел спросить по вашему топику
А почему именно статьи?
Ведь формат блогов может подразумевать любой тип сообщения:
видео с комментом (и ссылкой)
фото с комментом (и ссылкой)
и т.п.
Какие-то более гибкие форматы подразумеваются?
Или только статьи-синонимайз, только хардкор?
regta, без проблем. Могу разместить статьи с фото и видео, но они должны лежать на стороннем сервере.
21.10.2013 был исправлен баг, вследствии чего многократно увеличилась скорость ручного добавления страниц (вкладка Добавить вручную).
Хорошая статья + еще и с правильным сео - думаю баксов на 10 минимум потянет. умножаем на 1000 получаем 10к$... И кто даст вам такой "багаж" для эксперимента с вашим стремным методом.. не смешите мои подковы...😂
Я имел ввиду качественно размноженные статьи, желательно с трех (и более) различных статей и правильно подобранными анкорами.
Всем кто заказывал прогон, помимо пропинговки странц, сегодня добавил в Яндекс AddURL.
Вопрос имел совсем простой смысл. Например, скрипт установлен на site.ru. Как приятный побочный эффект работы вашей пингалки было бы здорово иметь возможность скачать свежечеканые прокси по адресу site.ru/proxy_list.txt для использования в сторонних приложениях. Так сказать скрипт - два в одном. ☝
Это как пожелание.
Возможно кого-то огорчил ваш пост. Нужно понять и пгростить. :)
По поводу приобретения отпишусь вам в личку, так как ICQ не пользуюсь.
Ответил Вам в ЛС. У меня есть такой принцип, что всегда всем помогаю со всеми своими скриптами + всегда готов выслушать предложения по улучшению скриптов и пожелания, т.к. я только за здоровую конкуренцию.
Траст...что это такое?
Какая от него польза?
Создал 3К блогов и не было желания прогнать свой сайт по блогам?
Просто,как то не айс заказывать прогон,если не знаешь что он дает
Раньше тут была услуга 1000 блогов с размножением и написанием статьи
Если честно,толку особо от того прогона не заметил (в индексе 950 блогов уже год)
Потому и спросил,чего ожидать от прогона
Былобы лучше сначала прогнать свой сайт,посмотреть на результат
Если прогон дает рост трафика
Выложить в теме график роста и тд
Тогда и услуга пойдет веселее
А так...
На счет тарста (по xtool.ru) скопирую с их сайта, думаю понятно, - Алгоритм траста xt предназначен для анализа способностей страницы/сайта как донора. Выше трастовость XT - лучше ссылочный донор.
На счет второго, - хорошо, сделаю такой эксперимент.
Но для этого мне нужен человек, у которого есть средний сайт, не под фильтрами. Еще мне нужно от него 0,5-1к хороших статей с правильно подобранными анкорами. Этот прогон сделаю бесплатно.
Любопытный скрипт.
Я так понял, что помимо самой пинговалки есть еще сбор прокси. А они могут регулярно записываться в файл на сервере, чтобы при желании их можно было использоваться для других целей?
Да, сбор проксей есть, через крон файл, который парсит указанную страницу и записывает в базу данных. Не понял вопроса на счет "чтобы при желании их можно было использоваться для других целей?". Если необходима нестандартная какая-то функция, то пишите, реализую.
---------- Добавлено 17.10.2013 в 14:04 ----------
Я много читал как тут минусует ни за что, на себе сегодня ощутил - минус 811 в репу пришло за эту тему от анонима.
Данный скрипт оптимизирован очень хорошо, памяти 7 метров жрет при пинге и многопоточность кушает 0,3-1,5% процессорного времени.
Или здесь таким способом конкурентов пытаются убрать?
А как с другим моим вопросом?
Ответ на вопрос: "ТС,какой результат замечен от прогона по 3к блогов?", я если често не знаю, пока 1 человек заказывал прогон по 2,5 к блогов со скидкой 50% за отзыв. Можно будет узнать результат, как сами понимаете, через несколько апов.
Но скажу сейчас от себя (делал прогон по 330 блогам своего сайта), прирост по особо неконкурентным НЧ и СЧ будет, так же прирост траста по xtool, разбавление ссылочного и рост авторитетности в рейтинге блогов рунета (если прогоняемый сайт в нем присутствует).
Но сами должны понимать что по большей степени результат сейчас зависит от предоставленных статей, а так же правильно подобранных анкоров в них.
За свои блоги, о которых Вы отозвались отрицательно, я дорожу и не позволяю публиковать в них как Вы сказали "спам", т.к. делал их от души и на совесть, на которые потратил немало времени, притом что стали они такими как есть не без помощи хумана эмулятора.