WebByte

Рейтинг
36
Регистрация
21.05.2004

Вот только увидел тему, а спросить меня не спросили :)

Коля Дубр:
сколько это траффа, какие нагрузки. Рассчитайте стоимость хостинга

Многопользовательский проект размера СеМастера – ну хотя бы тысяча-другая пользователей :p – достаточно ресурсозатратная штука.

Чтобы обслуживать всех своих пользователей, необходима распределенная система обработки заданий. А она подразумевает большие нагрузки на сервер. Обычным виртуальным хостингом не ограничиться. Был прецедент, когда я пробовал запустить систему в полную мощность на мажордомо. Это было еще в начале существования, когда пользователей было не так много. Отключили меня буквально через несколько часов — система неплохо так жрала ресурсы :) Поэтому под проект нужен отдельный сервер. Лучше несколько :)

Раз отдельный сервер, то и за трафик придется платить отдельно.

А в рунете это очень дорого, поскольку на таком проекте основной объем трафика - входящий. По расценкам мастерхоста – 3$ за гиг. В Рунете такой проект не выгодно держать.

Поэтому, к примеру, СеМастер физически находится в Штатах.

Там дают 1000Gb трафика. Правда, сейчас я прикидываю как бы еще 2Tb вырулить.. ;)

В общем, бесплатная модель для такого сервиса исключена.

Деньги на чем-то делать надо.. :) Но по моим наблюдениям, не так много желающих платить даже мизер..

Ну и не забывайте о стоимости человеко-часа разработки.

СеМастер сейчас – это уже больше мегабайта исходных текстов – 15-20 тысяч строк. Можно и меньше, но если делать именно сервис, а не кучку скриптов под одним доменом, то разработка единого фреймворка примерно в такие объемы и выльется. Разработка одним человеком означает, что при любой непредвиденной ситуации вы подвисаете в воздухе. У меня сейчас второй программер в отпуске и недавно пришлось на 2.5 часа закрыть доступ на добавление новых заданий :(

Проверьте, сколько запросов позволяет сделать яндекс.

Мало. Что Яндекс, что Гугль за такое число запросов банят практически через несколько дней. Мы тоже не лыком шиты, но извращаться приходится, да. Если же делать все цивилизованно – через покупку выдачи, то проект точно не окупится :)

А оказывается, что у него просто 50 шаблонов заготовлено, для борьбы с семониторами и семастерами. А почему нет?

Пока, слава святым, такого нет. Но в любом случае у нас это отслеживается на автомате и если что, шаблоны правятся достаточно быстро. Но идея хорошая, пожалуй я предусмотрю такой вариант развития событий.


Потом, не забывайте о конфиденциальности. На мой вкус, речь идет о данных, которые я не стал бы размещать на чужом сервере.

Вообще, конечно, на больших объемах следить кто что мониторит - очень сложно. Полтора года назад я еще знал, что называется, «в лицо» своих клиентов. А сейчас смотрю только сводную статистику – число регистраций, число дневных обращений к поисковикам. Что-то иное отслеживать не хватит никакого времени. Ну и много зависит от авторитетности проекта. Рунет, блин, очень тесный и «слив базы» попросту может похоронить проект.


И, вполне возможно, попытался бы оттуда стянуть чужие =)

Не все так просто. :) Объемы очень и очень внушительные, поверь.

Да и БД распределенные... Хотя, наверное, дыры есть в любом проекте.


Когда люди начинают доверять роботам, другие люди этим пользуются. Вычисляется айпишник вашего бота, и под него делается клоака. И все.

Есть способы отслеживать это дело на автомате. Вот их раскрывать не буду.


Гораздо проще сделать скрипт, распространяемый за какую-то денюжку "как есть", с возможностью вести несколько проектов из одного скрипта.

Думаю, такой вариант не исключен. Пробник у нас уже был с ДиалогМастером. Так что, поживем — увидим, следите за новостями СеМастера :)

А что это? :D

Перец:
Я думаю локальная версия будет более функциональной - сортировка по столбцам происходит мгновенно, перерисовка экрана тоже. Инет сейчас хоть и быстрый, но всё же не настолько чтобы обеспечить тот же уровень, что и программа.

А разница в 1-2 секунды играет роль?

На СеМастере сейчас вовсю внедряется AJAX. Как раз для отчетов будет возможность сортировать без перезагрузки страницы, что весьма неплохо сработает на больших отчетах.

В общем, если есть желание - пишите конкретнее, что добавить на СеМастер, чтобы получить систему, которая нужна.

Сейчас у ЛинкМастера достаточно много функций, которые реально нужны системе:

- проверка страниц, где стоят ссылки (включая robots.txt, noindex)

- проверка какие из ссылок проиндексированы

- проверка внешних параметров - например, pr, cy и число внешних ссылок на той странице, где есть ссылка.

- отслеживание новых ссылок на сайт

все это можно и по расписанию делать.

Добавить пару полей для напоминания что и когда продлить - как два байта переслать :)

Отслеживание ссылок можно и у меня делать. А если нужна доп. функциональность - пишите в суппорт, добавим.

А причем тут Москва-не Москва. Хорошие программеры и на переферии неслабо берут ;) Тем более за готовый фреймворк.

За 200 - это шутка такая? :) Или так низко цените свой человеко-час?

Жень, а что это изменит? 99% моих пользователей не знают даже кто рулит СеМастером, не говоря уж о том, где этот кто-то работает и что это за "Випро" такое. Для них гораздо важнее, чтобы отчеты вовремя собирались.

Оставшийся процент частично знает :) Вот Виталий, мне кажется, не удивился. Бегать искать тех, кто не знает, и сообщать им об этом? Да ну брось. Да, я работаю в Випро. Но с 10 до 18.30, а в СеМастере я работаю с 20-ти до 2-3 часов ночи.

Я, когда узнал об этом, сильно удивился.

Чему? :) Если бы я работал в "Ашманов и Партнеры" ты бы меньше удивился? :)

А два года назад СеМастером рулил Андрей Иванов, работавший в "Ашманов и Партнеры". И до сих пор домен зарегистрирован на него.

И чего дальше?

Жень, ВиПро никаким боком не относится к СеМастеру. И никаким боком информация о пользователях/данных СеМастера не попадает в ВиПро.

СеМастер весь последний год как был, так и остается моим личным проектом, не связанным ни с одной seo-конторой - будь то "Ашманов и Партнеры", "ВиПро", "РА Елена" или что-то там еще. Если ты докажешь обратное – я отдам СеМастер тебе. Если нет – изволь извиниться за необоснованный наезд на сервис вообще и на меня в частности.

Апдейт еще не кончился, но начало радует :+) По кондеям седня праздник :D По бытовой тож ниче так.

Не сказал бы что апдейт. Скорее все же пополам с откатом.

То, что вчера упало - чуть откатилось, что не упало - чуть приподнялось.

По кондиционерам выдача двухнедельной давности.

Еще один факт, указывающий на откат - число документов в индексе не изменилось пока. Впрочем, до 12-ти часов еще есть время. Позже, обычно, число документов не меняют.

В целом пока чувства сдержанные - жду следующего полноценного апдейта, который все на свои места и расставит.

Всего: 306