Удаление большого числа файлов.

magazzz, для групп файлов можете дополнительно использовать xargs, он позволяет группировать файлы.

что-то типа

find /var/www/pols/data/www/data/logs -cmin +2880 -type f | xargs -I _ -n 1000 nice rm -rf _

это поможет ощутимо снизить нагрузку на систему при удалении. со значением 1000 можете поиграться, но и это должно подойти.

Положите del.php в папку с кэшем. Отработает очень быстро.

<?php
function SureRemoveDir($dir, $DeleteMe) {
    if(!$dh = @opendir($dir)) return;
    while (false !== ($obj = readdir($dh))) {
        if($obj=='.' || $obj=='..' || $obj=='del.php') continue;
        if (!@unlink($dir.'/'.$obj)) SureRemoveDir($dir.'/'.$obj, true);
    }
    if ($DeleteMe){
        closedir($dh);
        @rmdir($dir);
    }
}

SureRemoveDir('.', false);
?>

Если это не шаред хостинг, то рекомендую использовать утилиту tmpwatch.

Любые решения на PHP курят в сторонке.

---------- Добавлено 27.05.2014 в 23:16 ----------

Умный совет!

Вот посоветовали, но не понимаю по английски

http://serverfault.com/questions/237981/how-do-a-slow-recursive-delete-on-linux

---------- Добавлено 28.05.2014 в 15:39 ----------

Пока что уменьшил время кеша и частоту чистки.

Вроде справляется пока что.

Попозже попробую другие методы.

Используйте отдельную файловую систему для файлов с логами - тогда сайты тормозить не будут. Выберите какую нибудь ФС которая более всего подходит для большого кол-ва мелких файлов. Например неплохо с этим справляется reiserfs, можно ещё jfs попробовать. Ну или на крайний случай ext2 без журнала. А самый лучший вариант - tmpfs, если памяти достаточно и с электриками дружите :)

Была в свое время такая проблема, в папку набилось невероятное число файлов логов (узнал об этом только из-за того, что на сервере свободное место кончилось, после удаления выяснилось, что папка с логами весила 60 гигов, при том, что 1 файл лога и 1 килобайт не всегда весил). Операции удаления через find в принципе не работали, хоть сутки жди. Помогло только вот это:

cd /put/papka ; cat . | strings | xargs rm -f

Гигабайты свободного места стали возвращаться прямо на глазах :)

find _youtubecache/ | xargs rm -rf

удаляю так.

строит список пачками а не прочитывает все.

Поддерживаю censored!,

Все проблемы аналогичных удалений утыкаются в момент сканирования \ листинга директории в которой находится файл, таким образом происходит следующее: вы например хотите удалить 1 файл из директории в которой находится 1 миллион файлов, для того что бы получить доступ к 1 файлу система строит список файлов в директории (если использовать find или ls) таким образом ... удаляя 100 файлов вы перечитываете 100 миллионов файлов ....

Можно попробовать вот такую вот конструкцию, если таким путем считать количество файлов в в директории, то занимает около 15 секунд на моем супер производительном роутере с 600 Mgz и 256 метрами памяти и IDE винтом :) Если же удалять в папке 1 миллион файлов, то занимает несколько минут, все на том же мега производительном роутере :)