Спарсить 1 лям страниц

12
JB
На сайте с 09.05.2014
Offline
210
#11

сначала подумал - что имелось ввиду спарсить - посоветовал ему жабу но потоом второй месейч прочел - там понял вроде как на комп весь контент слить а еще лучше на сайт! ☝

вгетом вытяни сайт, а потом замени через ноут урлы на урлы своего домена и залей, а если хочешь поставить контент на какую то кмс, то хз, это надо еще посмотреть на тот сайт :D

324 79
На сайте с 24.07.2012
Offline
188
#12

Объясняю что нужно:

Значит както давно парсил человек мне сайт, и автоматом все выкладывалось ко мне на сайт, но постоянно раз в неделю точно, все слетало, мне жто достало и я бросил это дело!

Сейчас хочу возобновить весь процесс но глобальнее, и второе не парсить, а выкачать сайт весь на винт, и тупо залить себе заменив домен, ну и убрать логотип того сайта и поставить свой! Те по сути копию полную, но исходник сам копия по сути вот что интересно!

И дальше когда мы выкачаем пару Лямов страниц, тупо уже на своем сервере ставим отглаженную публикацию страниц в день и наслаждаемся индексом!

Работаем под Гугл

Что касается высказывания типа я ничего не понимаю, это да я не понимаю, если знал сам, тут не писал бы!

Кто понял жизнь - бросил работу!
N3
На сайте с 28.04.2014
Offline
98
#13

О, уже

324 79:
выкачать сайт весь на винт

подожду пару деньков, может еще чего поменяется.

Неискоренимо нежелание пользоваться поисковыми системами - даже находясь на форуме о поисковых системах © Cell Влазить напрямую в базу — это невозможно © Игорь Белов, mchost.ru Если SeoPult купил ссылку - значит она "рабочая" © Nat_SeoPult
324 79
На сайте с 24.07.2012
Offline
188
#14
Nam3D:
О, уже

подожду пару деньков, может еще чего поменяется.

Слушайте я что по вашему программист чтоли?

Я как могу так и пытаюсь объяснить!

eN_Slon
На сайте с 13.02.2007
Offline
159
#15

Ребята, там не статика. Там динамика. Вгеты и т.п. не подойдут. Там нужен точечный парсинг с умной заливкой на свой движок.

Чтобы было понятнее скажу на что это похоже - на покупку-продажу авто. Нужен сайт с поисками, фильтрами и т.п.

Парсинг, граббинг, автоматизация всего что вы можете сделать в браузере(и не только) сами. Любое кол-во, любые защиты.
Алексей Горлов
На сайте с 08.02.2012
Offline
27
#16

ТС, закажите парсер под свои нужны, на выходе получите файл импорта на свою CMS, которые останется только импортировать.

А выкачивать 1. млн. стр. в статике, сколько месяцев или лет уйдет на обработку? Или хотите 1 млн. файлов поставить на хостинг?!

Создание сайтов и интернет-магазинов «под ключ» (/ru/forum/877593)
VulkanPartner
На сайте с 27.03.2014
Offline
91
#17

324 79, кол-во страниц влияет только на время работы парсера. А для написания самого парсера важно знать конкретный сайт и информацию, которую нужно оттуда брать. Есть ли защита от парсинга на том сайте или нет? Спарсить все подряд? Или нужно что-то чистить? Рекламу, например, счетчики и т.д.? Без нормального ТЗ, как вам уже сказали, нормальных ответов и оценки вряд ли дождетесь...

https://perestroika.team/ru/ (https://perestroika.team/ru/) Perestroika Affiliates- ведущая гемблинг-партнерка. RevShare - до 60%. CPA - до 150$.
324 79
На сайте с 24.07.2012
Offline
188
#18

Да наверно я че то много захотел))) обдумать надо

seo-Hunter
На сайте с 23.03.2013
Offline
55
#19

Я бы нашёл прогера, который накатал бы скрипт по типу RSS в дле. Залил на хост и он комбайном собирал бы страницы жертвы. Не стоит затрачивать столько ресурсов и лить сайт полностью, тем более действительно ресурс с защитой от парсинга может быть. А так и ресурс растёт постепенно и по жопе от ПС не получишь... ну или не сразу🍿

A6
На сайте с 30.04.2012
Offline
53
#20

могу написать парсер на Human Emulator'e. 435 467 211 icq

skype: vanya927
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий