Удалить дубли - 80кк строк

leo3331
На сайте с 07.01.2007
Offline
154
5586

Здравствуйте, чем можно удалить дубли по строкам?

В файле 80кк ключевиков.

bmwm3
На сайте с 21.10.2009
Offline
35
#1

сколько весит файл ?

если памяти хватит то так

<?php file_put_contents(ok.txt , array_unique(file('файл.txt'))); ?>
Лучше решение под даттинг трафик!!!! (http://tinyurl.com/39lto3z) авто постинг в форумы(все движки)
Dub Rat
На сайте с 01.03.2009
Offline
87
#2

буду банален - KWK? тут ещё есть Keys Base Cleaner. ещё KeyWasher

думаю десктопные точно с 80кк справятся

K
На сайте с 14.10.2007
Offline
238
#3
Dub Rat:
буду банален - KWK? тут ещё есть Keys Base Cleaner. ещё KeyWasher
думаю десктопные точно с 80кк справятся

5ый не справится, а 4ый может

Таггу x_x
На сайте с 31.10.2005
Offline
445
#4

Проще пареной репы. Засунуть в excel. Нажать кнопку "удалить дубликаты".

☠️☠️☠️
MS
На сайте с 21.07.2008
Offline
216
#5
Tarry:
Проще пареной репы. Засунуть в excel. Нажать кнопку "удалить дубликаты".

80 миллионов? В эксель? :)


или это такой тонкий юмор?

M
На сайте с 08.06.2010
Offline
8
#6

ексель не потянет столько строк

ексель 2008 тянет 1кк строк

а вот что точно поможет - csved

Магазин фтп-аккаунтов MailReger.Ru (http://mailreger.ru) ICQ 521603
V
На сайте с 04.04.2007
Offline
75
#7

Самому не доводилось испытывать, но в закладках торчит этот метод: /ru/forum/comment/3956196

Zemo
На сайте с 28.03.2006
Offline
117
#8

TextPipe точно справится ;)

Таггу x_x
На сайте с 31.10.2005
Offline
445
#9
minSEO:
80 миллионов? В эксель?

80 млн. это фейл :) Сори, недопонял вопроса. А в чём это хранится? 0_o

leo3331
На сайте с 07.01.2007
Offline
154
#10
Tarry:
80 млн. это фейл Сори, недопонял вопроса. А в чём это хранится? 0_o

в винчестере

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий