rpex

rpex
Рейтинг
112
Регистрация
19.06.2007
PinkPanther:
Капча и бан - не знаю. Яндекс, насколько мне известно, действует иначе - он выдает энное количество ответов на публичные запросы, за определенный промежуток времени, на 1 IP. Если превысить лимит, он перестает выдавать. Потом снова начинает, когда количество запросов на единицу времени становится, с его точки зрения, допустимым. Исчерпаете минутный лимит за секунду - будете ждать 59 секунд. Не помню точно, но по тИЦ он обрабатывал не меньше 10 запросов в секунду (пользовался десктопной утилитой собственного изготовления).

Если у вас, скажем, 20 тысяч блогов в системе, и необходимо проверить в среднем 25 страниц индекс-выдачи (~500 страниц на блог, по 20 результатов на странице, т.е. 25 запросов), вы сможете проверять один блог примерно за 3 секунды. 20 блогов в минуту, 600 в час, чуть меньше 40 часов - все блоги. Это с 1 IP. Если у вас хотя бы 16 IP, проверите довольно быстро. :-)

Но можно поступить иначе. В системе есть активные пользователи и неактивные. Если пользователь активен, ему необходимо частое обновление данных. Сделайте кнопку, по которой он сам, из браузера, со своего IP, запросит данные, и вы их получите, воспользовавшись его компьютером, как прокси-сервером. Кажется, ява-скрипт это позволяет сделать. Или нажмет на кнопку "Обновить показатели" и попросит ваш скрипт обновить данные его блога вне очереди. Тиц, PR, количество подходящих для размещения ссылок страниц, и т.д. Можете приделать к кнопке капчу, чтобы избежать атак - думаю, никто не будет возражать против её ввода. :-)

Давайте, Вы сначала попробуете снять индекс хотя бы для 100 сайтов сами (заметьте – индекс, а не ТИЦ, а так же еще пробить на КЕШ каждую страницу), а потом мы с вами уже предметно пообщаемся, хорошо?))

seoBB:
теоретики такие теоретики...

:)

PinkPanther:


Ну, вы же не вручную их проверяете, правда?... 🚬
Если у вас хороший канал, и есть хотя бы десяток IP, запускаете скрипт-шарманку с регулярным выражением внутри, и вперёд, кофе пить. Работы на полдня, реально. На все тыщапятьсот блогов в вашей базе, ИМХО. :)

Вы же в курсе про капчу и про бан IP, правда?)) Каждый переиндекс мы делаем порядка 10 млн запросов к яндексу.

PinkPanther:
Вопрос к саппорту. Скажите пожалуйста, откуда взялась проблема "0 страниц доступно", или запрет на кучу страниц, которые в индексе и имеют нормальный контент? Это связано с отсутствием средств на автовыкуп? Когда будет решена эта проблема

Проблема "0 страниц" взялась из-за неполадок в индексаторе. Завтра к 15:00 часам все должно стать на место.

PinkPanther:

проверить наличие страницы в индексе, ИМХО, несложно, и можно сделать в любой момент для любого блога любым роботом на полстраницы кода.

Угу, особенно, когда нужно проверить несколько миллионов страниц.

PinkPanther:
И второй вопрос. Вы действительно, на полном серьезе, утверждаете, что Байпост сможет выкупить 50% страниц за 50% от рекомендованных цен, притом не на час, а на месяц?

Не совсем так как вы сказали, соответствие с рекомендуемыми ценами там сложное. Но по сути - да!)

bigbiznews:
Что я могу сказать про байпост как продавец ссылок(полгода) через эту биржу.
-Удобство - зачет 100%
-Вывод денег от 50 руб. - зачет 100%
-Толерантное отношение к постам, минимум 150 знаков - зачет 100%
-Оперативная связь с техподдержкой - зачет 100%

Мерси)

bigbiznews:

ТЕПЕРЬ О МИНУСАХ.
- Постоянные "технические работы"
-Странное начисление денег. Пример. Ссылка по средней цене в системе для блога 10 рублей. Продано в месяц 300 ссылок, начислено за месяц тоже около 300 рублей..Где логика?Даже если комиссия 50%, то должно быть зачислено 1500 рублей..Что - на выходе ссылка стоит рубль в месяц?!!!
-Непонятные баги в определении подходящих страниц. То есть кол-во проиндексированных яндексом не совпадает с индексацией системы, хотя страницы удовлетворяют всем ее условиям.

- работаем))

- у нас посуточный биллинг, если все 300 ссылок по 10 рублей простояли бы месяц - было бы 3000р

- как писал выше - отлаживаем индексатор, скоро все будет отображаться корректно.

может и я отмечусь)

И да (сорри, некогда читать всю ветку) - можно услышать точное число и на карту проезда бы посмотреть)

kiki1:
скажите. есть блог, тиц 30, lj. id:7615. висит на модерации дней 5. писал в поддержку, ответили, что не подходит из-за технических характеристик блог. я так понимаю, блог можно смело удалять из системы?

Подождите несколько дней - мы переиндексируем ваш блог и снова пошлем на ручную модерацию.

Bankrobber:
Да весной все работало как часы , а потом глюк за глюком...проблемы с выкупом и т.д.

Биржа растет - нагрузки увеличиваются) Увы, мы не были готовы. Подождите еще несколько недель - все будет работать как часы)

kiki1:
скажите. есть блог, тиц 30, lj. id:7615. висит на модерации дней 5. писал в поддержку, ответили, что не подходит из-за технических характеристик блог. я так понимаю, блог можно смело удалять из системы?

Сейчас не могу ответить со 100% уверенностью. В понедельник пересекусь с суппортом - узнаю точно.

neznajka077:
Не обновляется заработок. Не показывается заработок в день, месяц...

Еще отлаживаем. За предыдущие дни биллинг отработал, деньги начислены.

Сам склеит, для ускорения пропишите роботс

Для доменов 2го уровня работает вроде.

Как вариант - попробуйте разделить сайт на региональные разделы, и каждый раздел пропихните в ЯКу с отдельным регионом. Хотя, наверно, это будет не легко))

Всего: 977