- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
В 2023 году Одноклассники пресекли более 9 млн подозрительных входов в учетные записи
И выявили более 7 млн подозрительных пользователей
Оксана Мамчуева
дорген может сгенерить ссылки для проспама из карты сайта в таком формате (без пробелов):
можно будет добавить еще и в html, если сильно понадобится)
из таких скриптов, которые "нагружают" сервер, самый сильный в доргене это наверно curl - если три типа макросов на странице (контент, картинки, видео) - три запроса к ПС. все. если курл не работает на хостинге, то будет парсить через file_get_contents (без юзер агентов и кук).
Опять же, я вставлю свои три копейки, как имеющий кое-какой опыт в подобном:
есть ли грамотное кеширование? Вы уверены что при 10к уников в сутки ваши 2-3 дора не положат сервер? =)
Когда то я тоже написал дорген, и все было супер, но его пришлось практически полностью переписывать после того как доры стали выходить на посещаемость 10-15к уников. Так что советую сразу это предусмотреть, если планируете действительно хорошую вещь развить.
Teimos, + общая для всех подобный проблема,
я хочу залить, допустим 100 доров по 10 000 кеев каждый на один сервак где один IP.
в итоге дор начинает генерится и идет 1 000 000 (100*10 000) обращений с одного IP в поисковики что бы спарсить контент.
в итоге IP получает бан.
alexz15, шаблон доступен любому по линку (надо бы закрыть):
http://www.flixya.ru/templates/flixya/main.html
http://www.flixya.ru/templates/flixya/page.html
http://www.flixya.ru/templates/flixya/_media/style.css
вот что удалось вытянуть:
[ATTACH]112366[/ATTACH]
жаль имя шаблона категорий не смог подобрать )))
как я понял снипеты парсятся только с гугл, бинг и мэйл?
этого мало, в том же SED или yadd парсится намного больше ПС, при этом цена этих доргенов либо ниже, либо такаяже.
к тому же гугл забанит ip очень быстро (минус для тех, кто не хочет заморачиваться с прокси)
Есть ли плюсы у этого доргена по сравнению с SED ?
Опять же, я вставлю свои три копейки, как имеющий кое-какой опыт в подобном:
есть ли грамотное кеширование? Вы уверены что при 10к уников в сутки ваши 2-3 дора не положат сервер? =)
Когда то я тоже написал дорген, и все было супер, но его пришлось практически полностью переписывать после того как доры стали выходить на посещаемость 10-15к уников. Так что советую сразу это предусмотреть, если планируете действительно хорошую вещь развить.
благодарю за описанный Вами опыт)
файлы кеша находятся в указанном кол-ве в папках для кеша. если это кол-во файлов превышает указанное, то создается вторая папка для кеша и тд. это сделано, чтобы в одной папке не скапливалось много файлов. при обращении к странице эти директории сканируются и, если есть кеш-файл, то выдает его. таким образом это позволяет не удалять файлы кеша, если есть доступное место на хостинге. в доргене есть возможность ограничить создание кеш-файлов и папок.
Teimos, + общая для всех подобный проблема,
я хочу залить, допустим 100 доров по 10 000 кеев каждый на один сервак где один IP.
в итоге дор начинает генерится и идет 1 000 000 (100*10 000) обращений с одного IP в поисковики что бы спарсить контент.
в итоге IP получает бан.
Nikolaevichhhh,
смотрите сами: дорген в случайном порядке выбирает какую ПС парсить. если парсеров допустим три, то из 100 обращений к страницам дора (новым страницам, которые без кеша), будет примерно 30 обращений к одному поисковику через разные промежутки времени. если же наступит временный бан, то дорген выдаст контент из "резервуара". от сюда вывод - чем больше подключено парсеров, тем лучше. в доргене есть возможность подключения своих парсеров, о которой я немного написал в описании. можно приделать хоть парсер статей с сайта, на котором есть возможность выполнения поисковых запросов.
к тому же, вы можете использовать прокси (желательно хорошие) или анонимайзеры, которых в доргене уже 29 шт. если используете анонимайзеры, то скрипт выберет случайно ПС, затем так же случайно анонимайзер, через который будет парсить эту ПС. тут вообще шансы малы, что одновременно выберется одна ПС с одним анонимайзером, при том еще и 10 раз подряд. правда, может немного замедлиться парсинг, т.к. идет дополнительное обращение на сторонний сервер, и уже от него зависит, насколько быстро он выдаст страницу ПС.
поэтому делайте выводы.
moneySEO, спасибо что сказали про шаблоны :) исправил. зато теперь каждый может посмотреть, как реализован шаблон в демо-доре стандартными возможностями доргена ) только там не должно быть main1.html и page1.html. Кодировка UTF-8.
Есть ли плюсы у этого доргена по сравнению с SED ?
я наверно не очень информативно сделал описание, но все же его возможности постарался описать. тут вам решать.
можно будет добавить еще и в html, если сильно понадобится)
А как же конечно нужно
хочу еще раз отметить, что вся привязка доргена - это ПС и анонимайзеры (если используются). именно поэтому, для них будет отдельная тема в описании. если кратко, то дело в том, что даже если случайно гугля или другой поисковик поменяет html-код в своей выдаче, то не нужно перелапачивать весь скрипт, а достаточно открыть файл парсера и подправить его, согласно нововведению ПС. в остальном ядро скрипта продолжает работать как было задумано.
в каком формате html ссылки должны быть?
в каком формате html ссылки должны быть?
просто список урлов
как будет зделано это ,готов буду купить сразу