Большая проблема с парсерами

Кстати еще идея - JavaScript добавлять в страницы... Парсеры которые смогут его высчитать - достойны того чтобы отдать им контент... :)

А сделайте закрытый сайт с авторизацией и подтверждением через смс. Аккаунты банить значительно легче IP.

У вас ведь Контент, а не сеошное дрочево какое.

Толку от такого сайта будет ноль. Я бы никогда не стал регистрироваться ради рингтонов. Темболле с подтверждение по смс. И 99% аудитории таких сайтов точно так же

Seredniy, ну, ТС тут наплел про 16 гб памяти на сервере, может это очень популярный сайт.

да как я и писл досточно любой файл, который не нужен парсеру

вобще конечно сайт явно неоптимально написан раз не хватает таких мощностей

У сайта в лучшие времена 12к рейтинг по Алексе.

Написано отптимально, по запросам mysql аудит делали ребята из MySQL Performance Blog.

Так что давайте гепотетически предположим, что это не в скриптах дело, а в оочень сильной нагрузке.

SilverMaster добавил 07.01.2010 в 10:21

В таком случае 100% потеряем посщаемость. Т.к. монетизация адсенс.

а какже парсер который привязывается не к тегам, а к контенту ? :) против него ваша защита безсильна :)

Это как?

а при чем тут Мускул? 12 это не такая уж большая посещаемость

если правильно сделать кеш - до мускула почти ничего не дойдет

avtoblog, Это же парсеры. пройдут по каждой странице последовательно и поднимут все данные ОДИН РАЗ . Традиционный кеш страниц тут вообще бесполезен. Может быть будет полезно кешировать повторяющиеся блоки контента.

Если сайт настолько хорошо окупается, значит и парсеры не дураки. Они распарсят все что может отобразиться в браузере, все что им подсунут.