Оптимизация запроса с большим объемом данных

SELECT t1.id FROM table t1 LEFT JOIN table t2 ON t1.ekey=t2.ekey WHERE t1.id>t2.id

+ индекс по полю ekey

id      ekey

1       ключ1

2       ключ1

3       ключ2

4       ключ1

5       ключ1

Если нужно просто удалить дубликаты, то есть тупой и скоростной способ

ALTER IGNORE TABLE `tbl` ADD UNIQUE ( `ekey` )

ALTER TABLE `tbl` DROP INDEX `ekey`;

Если у Вас innoDB, то добавьте первой строкой

set session old_alter_table=1;

ALTER IGNORE TABLE `tbl` ADD UNIQUE ( `ekey` )

ALTER TABLE `tbl` DROP INDEX `ekey`;

set session old_alter_table=1;

Дело в том что мне не нужно удалять дубликаты, мне нужно их получить, чтобы в дальнейшем обработать...

---------- Добавлено 29.10.2015 в 15:40 ----------

Исходные значения в таблице:

id      ekey 

1       ключ1 

2       ключ1 

3       ключ2 

4       ключ1 

5       ключ1

Не пойму как работает запрос, он возвращает мне неправильное множество:

id

2

4

5

4

5

5

А должен вернуть повторяющие по полю ekey записи:

id      ekey 

2       ключ1 

4       ключ1 

5       ключ1

GROUP BY t1.id

select id,ekey, count(id) as c from email_subscribe  group by ekey  having c>1

select distinct a.id, a.ekey from email_subscribe a inner join email_subscribe b on a.ekey=b.ekey where a.id>b.id

А вообще так делать нельзя, хоть в mysql и работает:

SELECT id FROM email_subscribe GROUP BY ekey

select id,ekey, count(id) as c from email_subscribe  group by ekey  having c>1

Это правильный ответ. Запрос выдаст только дупы, их можно смело удалять. После удаления запрос нужно запустить еще раз для удаления следующей партии дупов. И так несколько раз.

Нужен еще индекс по полю ekey. Работает быстро, гонял похожие запросы на табличках по несколько лямов записей.

ps: join-ы и т.д. для таких целей совсем не нужны.

SELECT id FROM email_subscribe GROUP BY ekey

В классическом SQL нужно к полю id добавить одну из функций: min(), max(), first(), last().

MySQL не заморачивается с этим и вариант с id работает. :)

Запрос выдаст id всех уникальных записей (которые нельзя удалять). Все остальные id, которые не выдал запрос - дупы.