zusull: victim, почему у меня вместе с платным пакетом расходуется бесплатный?
Сперва расходуется бесплатный счет, потом платный. Так логичнее. У нас там целая система, все продумано :)
Einstein02: Если я введу сайт, программа сможет сама привести список беков? Или нужно самим через маджентосео находить?
Да, сможет. Рекомендую брать беки из панелей вебмастера Яндекса и Гугла, достаточно ввести логин и пароль. Так же программа может собрать беки с ахрефс (платно, т.е. надо иметь свой акк) и соломоно (бесплатно до 500 беков, больше - платно, нужен акк с подпиской).
zusull, Да, неизвестные базе или устаревшие (которые давно не спрашивали) сайты добавляются по запросу, т.е. данные для них только при повторном парсинге собираются. Необходимо время, чтобы получить данные с маджестика.
zusull: victim, последние 2-3 дня при проверке спамности стали очень часто вылезать ошибки 500 сервиса соломона. при этом запросы идут по несколько штук в секунду (судя по логу) и прога вешается намертво.
При этом с того же Ip вручную соломоно нормально все показывает (через браузер)
Можно с этим что-то сделать?
Да, я в курсе. Работает с перебоями. Я уде отписался им, чтобы проверили и приняли меры.
Работа через браузер и через API - это несколько разные вещи.
phoenix555: Печалька, только купил программу и тут такая подстава - работа с программой тоже платная😕
Ну, только запросы к маджестику и только свыше 1000 запросов. Да, вынужденная мера в связи с очень платными тарифами на получение данных с сервиса.
Seomen_ua, Fringer, Malcolm, Да-да! 1000 запросов на 30 дней! Потом лимит обновляется.
Так же сегодня добавлен более дешевый тарифный план "Лайт" на 10 000 запросов, цена 300р.
Pustik: Такое предложение - при выгрузке ссылок из бирж, хорошо бы еще парсить непосредственно ключи на которые ссылки стоят, было бы удобно при зачистке, чтобы не трогать те запросы с которыми и так все чики-пики.
Я подумаю, но не обещаю. Ибо это несколько выбивается из общей концепции.
TeXiCo: Ясно, а поговорить с ними об оплате только сделанных запросов, без подписки не вариант? Просто узнаю. :)
У нас не очень хорошие отношения сложились. Когда-то только в момент запуска программы от них было дружеское предложение, но тогда оно мне показалось не очень интересным. Оно бы и сейчас не спасло ситуацию, но облегчила мучения, возможно.
Короче, тогда я его не принял. Сейчас оно уже не актуально с их стороны. Идти на переговоры и договоры большого желания нет. Я в их глазах террорист, а с террористами не договариваются...
TeXiCo: Лимиты списываются при любом обращении? Или, если данные есть в кеше то лимиты не используются?
Да, все равно списываются, даже если значения в кеше.
Не смотря на кеш, мы ведь все равно должны обновлять эти данные с определенной периодичностью. Если бы не кеш, на тот поток запросов, что прошел через наш сервер за ноябрь, не хватило бы даже самой дорогой подписки. А две таких я уж точно не потяну.
TeXiCo: Насчет проверок и лимитов. Что насчет сохранения данных по спаму\трасту на сервере? Это возможно реализовать? Вроде в самом начале проблем с маджестиком, такое предлагали. Не придется напрягать лишний раз сервисы. Можно установить определенный срок жизни данных.
А так и есть. Только такой вариант и не нарушает политику использования мажестика. Данные идут через наш сервер, где они кешируются на какой-то срок. Т.е. сперва наш сервер отправляет запрос в маджестик по API, получает ответ, а программа уже забирает наши данные.
Если данные о сайте уже есть на сервер, он их сразу отдает, если их нет, сервер их запрашивает.
igriv: victim, планируется ли сделать оплату лимитов с помощью бонусов profit-partner.ru как у XTool.ru?
Хм...Хорошая идея! Я думаю, это можно сделать, но только зачисление будет в ручном режиме.
happy-d: Тут недавно уже поднимался вопрос о качественной, а не о количественной оценки спамности. Вопрос к Victim'у: реально ли прикрутить к программе оценку наподобие той, что описана здесь?
Вряд ли, это уже не экспресс оценка получается.
happy-d: Дело вот в чем. Недавно выводил из под ручного фильтра один клиентский сайт, так там в примерах гугловоды присылали некачественные ссылки с сайтов, имеющих уровень спамности 3-4, и "трастом" 10-20 и более (по данным FastTrust). Но самое интересное - это анкоры с текстом "здесь" (псевдоестественные) в ссылках-нарушителях. Я и программу то купил уже от отчаяния, когда получил такое письмо с подобными примерами (после 4-х месяцев переписки и работы с disavow links). Но когда проверил через Fast Trust доноры в последних примерах от гугла, то понял, что программа мне не поможет. В итоге провел дальнейшую ручную зачистку, была еще пара запросов на пересмотр, после чего ручной фильтр сняли.
Я вам не показывал мой скриншот, где Гугл прислал ссылку на Яндекс Каталог? Нет? Ну вот, а вы говорите...
Гугл он такой, если присылает какие-то примеры, лучше их отклонять и не искать в этом логики. Если куча примеров, где с первого раза принимали и снимали фильтр. И не меньше примеров, где раза с пятого только снимали.
Лично моя практика - я снял автоматический фильтр со своего сайта, при помощи программы. Она, собственно, ради этого одного сайта и создавалась у меня :) Но дело пошло дальше, как видите.
Stanislav Belov: Появилось пару вопросов:
1.Если подыхают прокси, fasttrust продолжаем парсить через капчу?
2.Какие сервесы после подыхания прокси отдают данные через капчу, а какие блокируют доступ? (например PR не дает капчу если исчерпан лимит прокси)
Если подыхают прокси, то проверка не осуществляется, просто данные не соберутся. Переключиться на работу без прокси в процессе сбора нельзя на автомате (вручную можно), т.к. нельзя быть уверенным в чем именно проблема и по какой причине, если перестают собираться данные.
Капчи отдают только обращения к Гуглу и Яндексу. В других сервисах нет капч.
zusull: А что случилось с определением траста?
Седня ссылки в сапе чекал, появилась надпись "CheckTrust: потрачены все лимиты!" и усе, траст больше не определяется.
Что с этим делать? До сегодняшнего дня нормально по 2-3 тысячи доноров в день чекалось
UPD
Все, нашел новость....
Если у меня подписка в маджестике есть, я смогу без вашей подписки траст пробивать?
Да, если новость видели, то вы в курсе что случилось и почему.
Да, сегодня будет апдейт, там появится возможность работать через Open App с маджестиком напрямую. Через свою подписку. Для тех, у кого есть подписка на маджестик будет удобно. Но если использовать только для сбора данных - не выгодно. Т.к. 25к запросов к маджестику стоят 1650р/мес. а через checktrust.ru 500р. за 25к запросов.
Stanislav Belov: На сколько я понял нет, программа работает через api majesticseo, а апи они дают только для платиновой подписки, которая стоит 400 уе в месяц. Только если разработчик опять поменяет способ парсинга.
Система такая, что с majestic общается мой сервер, через апи, разумеется. А программа уже пингует мой сервер. Т.к. правилами пользования маджестика разрешено юзать апи только "internal use only" - что значит, что только для личного пользования, не для программ и т.д. Таким образом наш сервер удовлетворяет требованиям, а уж что потом мы делаем с данными - касается только меня, что хочу, то и делаю. Так что мы ничего не нарушаем.
victim, почему у меня вместе с платным пакетом расходуется бесплатный?
Сперва расходуется бесплатный счет, потом платный. Так логичнее. У нас там целая система, все продумано :)
Если я введу сайт, программа сможет сама привести список беков? Или нужно самим через маджентосео находить?
Да, сможет. Рекомендую брать беки из панелей вебмастера Яндекса и Гугла, достаточно ввести логин и пароль. Так же программа может собрать беки с ахрефс (платно, т.е. надо иметь свой акк) и соломоно (бесплатно до 500 беков, больше - платно, нужен акк с подпиской).
zusull, Да, неизвестные базе или устаревшие (которые давно не спрашивали) сайты добавляются по запросу, т.е. данные для них только при повторном парсинге собираются. Необходимо время, чтобы получить данные с маджестика.
victim, последние 2-3 дня при проверке спамности стали очень часто вылезать ошибки 500 сервиса соломона. при этом запросы идут по несколько штук в секунду (судя по логу) и прога вешается намертво.
При этом с того же Ip вручную соломоно нормально все показывает (через браузер)
Можно с этим что-то сделать?
Да, я в курсе. Работает с перебоями. Я уде отписался им, чтобы проверили и приняли меры.
Работа через браузер и через API - это несколько разные вещи.
Печалька, только купил программу и тут такая подстава - работа с программой тоже платная😕
Ну, только запросы к маджестику и только свыше 1000 запросов. Да, вынужденная мера в связи с очень платными тарифами на получение данных с сервиса.
seomov, Не получал письма... Может затерялось.
Сделать не проблема. Просто есть несколько типов лимитов. Вот, например, так:
[ATTACH]130469[/ATTACH]
Можно выводить вместо очереди checktrust баланс. Сделаем.
Seomen_ua, Fringer, Malcolm, Да-да! 1000 запросов на 30 дней! Потом лимит обновляется.
Так же сегодня добавлен более дешевый тарифный план "Лайт" на 10 000 запросов, цена 300р.
Такое предложение - при выгрузке ссылок из бирж, хорошо бы еще парсить непосредственно ключи на которые ссылки стоят, было бы удобно при зачистке, чтобы не трогать те запросы с которыми и так все чики-пики.
Я подумаю, но не обещаю. Ибо это несколько выбивается из общей концепции.
Ясно, а поговорить с ними об оплате только сделанных запросов, без подписки не вариант? Просто узнаю. :)
У нас не очень хорошие отношения сложились. Когда-то только в момент запуска программы от них было дружеское предложение, но тогда оно мне показалось не очень интересным. Оно бы и сейчас не спасло ситуацию, но облегчила мучения, возможно.
Короче, тогда я его не принял. Сейчас оно уже не актуально с их стороны. Идти на переговоры и договоры большого желания нет. Я в их глазах террорист, а с террористами не договариваются...
В общих чертах ситуация такая вот :(
Лимиты списываются при любом обращении? Или, если данные есть в кеше то лимиты не используются?
Да, все равно списываются, даже если значения в кеше.
Не смотря на кеш, мы ведь все равно должны обновлять эти данные с определенной периодичностью. Если бы не кеш, на тот поток запросов, что прошел через наш сервер за ноябрь, не хватило бы даже самой дорогой подписки. А две таких я уж точно не потяну.
Насчет проверок и лимитов. Что насчет сохранения данных по спаму\трасту на сервере? Это возможно реализовать? Вроде в самом начале проблем с маджестиком, такое предлагали. Не придется напрягать лишний раз сервисы. Можно установить определенный срок жизни данных.
А так и есть. Только такой вариант и не нарушает политику использования мажестика. Данные идут через наш сервер, где они кешируются на какой-то срок. Т.е. сперва наш сервер отправляет запрос в маджестик по API, получает ответ, а программа уже забирает наши данные.
Если данные о сайте уже есть на сервер, он их сразу отдает, если их нет, сервер их запрашивает.
victim, планируется ли сделать оплату лимитов с помощью бонусов profit-partner.ru как у XTool.ru?
Хм...Хорошая идея! Я думаю, это можно сделать, но только зачисление будет в ручном режиме.
Тут недавно уже поднимался вопрос о качественной, а не о количественной оценки спамности. Вопрос к Victim'у: реально ли прикрутить к программе оценку наподобие той, что описана здесь?
Вряд ли, это уже не экспресс оценка получается.
Дело вот в чем. Недавно выводил из под ручного фильтра один клиентский сайт, так там в примерах гугловоды присылали некачественные ссылки с сайтов, имеющих уровень спамности 3-4, и "трастом" 10-20 и более (по данным FastTrust). Но самое интересное - это анкоры с текстом "здесь" (псевдоестественные) в ссылках-нарушителях.
Я и программу то купил уже от отчаяния, когда получил такое письмо с подобными примерами (после 4-х месяцев переписки и работы с disavow links). Но когда проверил через Fast Trust доноры в последних примерах от гугла, то понял, что программа мне не поможет.
В итоге провел дальнейшую ручную зачистку, была еще пара запросов на пересмотр, после чего ручной фильтр сняли.
Я вам не показывал мой скриншот, где Гугл прислал ссылку на Яндекс Каталог? Нет? Ну вот, а вы говорите...
Гугл он такой, если присылает какие-то примеры, лучше их отклонять и не искать в этом логики. Если куча примеров, где с первого раза принимали и снимали фильтр. И не меньше примеров, где раза с пятого только снимали.
Лично моя практика - я снял автоматический фильтр со своего сайта, при помощи программы. Она, собственно, ради этого одного сайта и создавалась у меня :) Но дело пошло дальше, как видите.
Появилось пару вопросов:
1.Если подыхают прокси, fasttrust продолжаем парсить через капчу?
2.Какие сервесы после подыхания прокси отдают данные через капчу, а какие блокируют доступ? (например PR не дает капчу если исчерпан лимит прокси)
Если подыхают прокси, то проверка не осуществляется, просто данные не соберутся. Переключиться на работу без прокси в процессе сбора нельзя на автомате (вручную можно), т.к. нельзя быть уверенным в чем именно проблема и по какой причине, если перестают собираться данные.
Капчи отдают только обращения к Гуглу и Яндексу. В других сервисах нет капч.
А что случилось с определением траста?
Седня ссылки в сапе чекал, появилась надпись "CheckTrust: потрачены все лимиты!" и усе, траст больше не определяется.
Что с этим делать? До сегодняшнего дня нормально по 2-3 тысячи доноров в день чекалось
UPD
Все, нашел новость....
Если у меня подписка в маджестике есть, я смогу без вашей подписки траст пробивать?
Да, если новость видели, то вы в курсе что случилось и почему.
Да, сегодня будет апдейт, там появится возможность работать через Open App с маджестиком напрямую. Через свою подписку. Для тех, у кого есть подписка на маджестик будет удобно. Но если использовать только для сбора данных - не выгодно. Т.к. 25к запросов к маджестику стоят 1650р/мес. а через checktrust.ru 500р. за 25к запросов.
На сколько я понял нет, программа работает через api majesticseo, а апи они дают только для платиновой подписки, которая стоит 400 уе в месяц. Только если разработчик опять поменяет способ парсинга.
Система такая, что с majestic общается мой сервер, через апи, разумеется. А программа уже пингует мой сервер. Т.к. правилами пользования маджестика разрешено юзать апи только "internal use only" - что значит, что только для личного пользования, не для программ и т.д. Таким образом наш сервер удовлетворяет требованиям, а уж что потом мы делаем с данными - касается только меня, что хочу, то и делаю. Так что мы ничего не нарушаем.
Только вот подписка стоит дороже - https://www.majesticseo.com/plans-pricing/more-power
Я не могу ежемесячно оплачивать такие большие счета. А небольшая комиссия с пользователей мне немного поможет.
Надеюсь, вы понимаете ситуацию не хуже меня.
---------- Добавлено 29.11.2013 в 22:02 ----------
Только что вышло обновление о котором я говорил.
Версия 1.5.14 - добавили возможность работы напрямую с majesticseo через OpenApp
http://trust.alaev.info/news/
Пользуйтесь на здоровье и не ругайтесь :)