Для удаления файлов использую встроенные модули os и shutil, для рекурсивного удаления каталога и всего его содержимого shutil.rmtree(). Скрипт проверяет размер директории и если он больше, то очищает содержимое не удаляя родительский каталог.