- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Здравствуйте!
Самая частый тип работы, который заказывают у меня, как у фрилансера-программиста - парсинг.
И 9 из 10 заказчиков соглашались парсить доноров в Wordpress/Woocommerce.
Был у меня заказчик, заказывал клонирование блогов об онлайн казино.
Это было примерно более 10 сайтов.
За каждый ценник был от 50$.
Я подошел с умом и создал универсальный парсер с использованием встроенного в Wordpress 4.7+ REST API, потому, что все из доноров были на Wordpress.
Woocommerce тоже поддерживает REST API, внезапно
С тех пор, когда заказчик заказывает у меня парсер Wordpress сайта, для меня это аттракцион невиданной щедрости.
Поменять URL донора, добавить дополнительные правила процессинга post_content, изредка вытягивать дополнительные поля (которые недоступны через REST API без авторизации).
Простыми словами, 1000 строк кода повышают ставку по заказу с 10$/час до 30$/час
Всегда хотелось больше...
Хотелось прогонять запросы через свой nodejs бэкэнд и получать стабильный пассивный доход за REST запросы
Так и пришла идея о сервисе импорта Wordpress сайтов через REST API (не имеет конкуренции на данный момент)
1. Указываем адрес донора с включенным REST API (включен по умолчанию в Wordpress 4.7+)
2. Указываем адрес акцептора, логин и пароль Wordpress пользователя с правами редактора (возможность загружать материал).
3. Изменяем правила процессинга содержимого, например, прогоняем post_content через функцию перевод (украинский - русский, очень полезно) или другие сервисы, которые работают через тот же REST.
4. Указываем интервал проверки нового материала.
5. Включаем проект.
Оплата по принципу за каждый REST запрос (больше материала либо более частый поиск нового материала - дороже).
Все работает без каких либо настроек на стороне сервера акцептора, материал добавляется через REST API, ровно также, как и парсится.
CRON, процессинг материала, проксирование, хэширование - забота nodejs бэкэнда.
Можно парсить множество доноров в один акцептор, можно даже парсить в уже готовые сайты.
Потому, что никаких прямых записей в базу данных!
А главное, все это дело будет работать с любой Wordpress темой, потому, что затронут только стандартный функционал.
Находим 3 донора на украинском языке (например, Woocommerce интернет магазины), которые в полном дне в Яндексе, добавляем в правило проекта пропуск через переводчик, подбираем оптимизированную тему, 15 минут, сайт готов.
Потому, что парсинг через REST быстрый - никаких регулярных выражений/html, возможность получать в одном ответе до 200 результатов / не нужно заново загружать уже добавленный материал для проверки обновлений (спасибо атрибуту date-modified, который можно передать, как параметр after в REST запросе).
Такие сайты продают дороже, чем скажем 5$ за 5000 REST запросов.
Я описал принцип работы и выложил исходный код Wordpress плагина, который парсит Wordpress сайты
/ru/forum/1020396
Но его главное отличие, даже не требуя специальной конфигурации сервера, его нужно устанавливать!
Процесс не будет молниеносным на обычных хостингах, и дальнейшее развитие проекта не такое перспективное, учитывая, вопрос блокировок IP со стороны донора, надобность дополнительных библиотек для дополнительного процессинга, ущербность WP CRON по сравнению с реальным.
Поэтому, очень хочется найти спонсоров облачного проекта.
Как?
ortegas,
Вы смотрели Ваших прямых конкурентов? По именам сейчас не вспомним, но есть достаточное количество плагинов автонаполнения сайтов на WP, работающих через api естественно, но в качестве доноров можно указывать не только сайты на WP, а любые сайты (с дописыванием пары правил).
Просто первый вопрос который бы задал спонсор - это чем они хуже, при том что они умеют импортить откуда угодно, а не только из WP.
ortegas,
Вы смотрели Ваших прямых конкурентов? По именам сейчас не вспомним, но есть достаточное количество плагинов автонаполнения сайтов на WP, работающих через api естественно, но в качестве доноров можно указывать не только сайты на WP, а любые сайты (с дописыванием пары правил).
Просто первый вопрос который бы задал спонсор - это чем они хуже, при том что они умеют импортить откуда угодно, а не только из WP.
Называйте имена конкурентов.
Я лично не встречал сервисов, которые могут заполнять Wordpress сайт про указав три параметра - адрес донора, адрес акцептора, учетная запись с правами редактора на сайта акцепторе (обратите внимание, никакие плагины устанавливать не нужно и никакие API изучать тоже).
Мои заказчики, которые получили готовые Wordpress сайты на основе плагина, часть которого (без поддержки Woocommerce) выложил в публичный доступ, тоже не слышали о таких сервисах и были готовы платить от 50 долларов за каждый сайт.
Чисто абстрактно отвечая на ваш вопрос, если эти сервисы импортируют информацию с любых сайтов, значит они парсят информацию из тела страницы.
Соответственно, некоторые параметры могут быть не выведены в тело страницы на фронтэнде (но будут доступны через REST API).
Например, Wordpress, как правило, выводит шорткоды через REST API без замены.
Соответственно, то, что спарсит любой сервис из HTML кода - будет HTML код, а по REST API, это будет та же публикация, что и отображается в админке на стороне донора (с сохраненными шорткодами и мета данными, типа даты публикации, модификации, теги, категории).
Парсинг по REST экономит ресурсы и работает быстрее по сравнению с парсингом аля Googlebot, соответственно, возможность предложить ниже ценник и сроки на такую услугу.
С вашим бэкграундом будет трудновато найти спонсора (если он умеет гуглить)
Самая частый тип работы
Самайте дальше!
---------- Добавлено 13.08.2019 в 01:13 ----------
edogs, полно плагинов таких для ВП. ТС в танке просто.
---------- Добавлено 13.08.2019 в 01:15 ----------
unspace, идея гиблая. Но пусть пробует если хочет.
если он умеет гуглить
Инвесторы не умеющие гуглить? Ты таких встречал? Точнее так - где ты видел инвесторов дураков?
---------- Добавлено 13.08.2019 в 01:17 ----------
ortegas, а не думал чем то полезным заниматься, вместо того чтоб гадить людям?
leks1380, мне тож это вызвало подозрение.
ТС, в чём прикол то?
Заказчики кончились. А кушать хочется.
Поэтому, очень хочется найти спонсоров облачного проекта. Как?
Русская языка учить надо, однако. Многа, многа надо.
ТС, в чём прикол то? Вы в одиночку смогли что то наШкодить...?
еще как смог 😂
Ортегу уже никто не помнит, кроме одного человека из темы. А ведь собственно он был одной из причин, почему многие исполнители с Серча перестали в принципе брать предоплату :)
Яркий пример, кстати, того как политика Серча "не лезть в экономические споры между пользователями и не банить за кидки" привела к тому, что люди были как минимум два раза прокинуты с одного и того же ника. Прямо попкорном запасаюсь, какая судьба ждет "спонсоров" сейчас.
Напомню, что еще год назад у человека было принципиальное кредо никогда не возвращать предоплаты. Люди конечно меняются, но в этом случае в такие изменения я не верю :) Явно нужно дать ссылки для обязательного ознакомления потенциальным спонсорам:
/ru/forum/1006586 (2018 год)
/ru/forum/893508 (2015 год)
Из "золотого фонда" цитат:
Решение суда есть? Уже неоднократно было сказано, что администрация не вмешивается в коммерческие отношения между пользователями. Если завтра кто-то откроет тему, что вы мошенник, то вас тоже заблокировать и вставить ссылку на тему в профиль? И так есть тема-предупреждение, которую все увидели, что еще необходимо от форума - общественность знает кто мошенник.
С вашим бэкграундом будет трудновато найти спонсора (если он умеет гуглить)
Также как и с вашим «лицом».
Но в вашем случае все куда более очевидно.
---------- Добавлено 14.08.2019 в 16:08 ----------
Русская языка учить надо, однако. Многа, многа надо.
Вам - нужно, без спору, на Запад вас никто и не пустит, только Россия.
Я больше преимуществ получаю от английского и польского.
---------- Добавлено 14.08.2019 в 16:10 ----------
Ортегу уже никто не помнит, кроме одного человека из темы. А ведь собственно он был одной из причин, почему многие исполнители с Серча перестали в принципе брать предоплату :)
Яркий пример, кстати, того как политика Серча "не лезть в экономические споры между пользователями и не банить за кидки" привела к тому, что люди были как минимум два раза прокинуты с одного и того же ника. Прямо попкорном запасаюсь, какая судьба ждет "спонсоров" сейчас.
Напомню, что еще год назад у человека было принципиальное кредо никогда не возвращать предоплаты. Люди конечно меняются, но в этом случае в такие изменения я не верю :) Явно нужно дать ссылки для обязательного ознакомления потенциальным спонсорам:
/ru/forum/1006586 (2018 год)
/ru/forum/893508 (2015 год)
Из "золотого фонда" цитат:
Весь серч перестал предоплаты брать.
Публичный деятель прямо.
Вы это исследование провели или в курсе моих отношений с заказчиками?
Из темы от 2018 года положительные отзывы видели - видели, негативные - нет.
У меня в отличии от налетевших анонимов, есть имя, фото и отрытые отзывы.
И за 11 лет на серче, я работаю над улучшением недочетов, а не меняю ники и мики маусов на аватаке.
Также как и с вашим «лицом».
Но в вашем случае все куда более очевидно..
Как был быдланом, кидавшим людей и оскорблявшим их, так им и остался. Да, некоторые вещи не меняются 🤪