Мак локальная папка с 350 ГБ файлов невозможно удалить

Вопрос или проблема

Я распаковал огромный набор zip-файлов в локальной папке на своем компьютере. Они занимают примерно 350 ГБ и содержат 58 миллионов файлов.

Я пытался удалить их обычным способом, отправляя в корзину. Не сработало, через 5 часов удалил только несколько тысяч файлов.

Пробовал удалять через терминал с помощью rm -rf FolderName. Он работал 5 или 6 дней без каких-либо обновлений на экране, я не имел представления о процессе удаления. Я сдался.

Также пытался удалить, используя rsync rsync -a --delete temporaryEmptyDir FolderName, но столкнулся с той же проблемой.

Пробовал удалить с помощью Python, не читаючи папку, а запрашивая удаление конкретных имен файлов:

import os
import glob
import pandas as pd

# Определение пути к директориям
csv_directory = "/Users/alexandreabujamra/Documents/Dados Speedio/CSV_outputs"
json_directory = "/Users/alexandreabujamra/Desktop/bucket-jsons"

# Используя glob для поиска всех CSV
csv_files = glob.glob(os.path.join(csv_directory, "CNPJ_part_*.csv"))

# Обработка всех найденных CSV
for csv_file in csv_files:
    try:
        df = pd.read_csv(csv_file, header=None)


        # Обработка CNPJ непосредственно в DataFrame
        def format_cnpj(cnpj):
            parts = cnpj.split("'")
            if len(parts) > 1:
                return parts[1].replace('.', '').replace("https://stackoverflow.com/", '').replace('-', '') + ".json"
            else:
                return "Неверный формат"


        df[0] = df[0].apply(format_cnpj)

        # Проверка и удаление файлов .json
        for json_filename in df[0]:
            if json_filename != "Неверный формат":
                json_path = os.path.join(json_directory, json_filename)
                if os.path.exists(json_path):
                    os.remove(json_path)
                    print(f"Файл {json_path} успешно удалён!")
                else:
                    print(f"Файл {json_path} не найден.")
            else:
                
                print("Неправильный формат CNPJ найден.")
    except Exception as e:
        print(f"Ошибка при обработке файла {csv_file}: {e}")

Сработало, но чрезвычайно медленно (1 файл каждые 5 секунд, потребуется 3300 дней, чтобы закончить работу).

Что можно сделать? Как я могу удалить это навсегда эффективным способом?

Моя версия MacOS — 12.7.5 (21H1222)

Ответ или решение

Удаление большой папки с файлами на Mac: эффективные методы и рекомендации

Удаление папки с таким объемом данных, как 350 ГБ и 58 миллионов файлов, может быть довольно сложной задачей. Ваша ситуация не уникальна и типична для пользователей, которые часто работают с большими наборами данных. В данной статье мы обсудим возможные способы решить вашу проблему и предложим подходы для более эффективного удаления файлов.

1. Понимание проблемы с удалением больших объемов данных

Когда дело доходит до удаления большого количества файлов, стандартные методы, такие как перемещение в корзину или использование командной строки, могут оказаться недостаточно эффективными. Некоторые причины могут включать:

  • Ограничения файловой системы: macOS может сталкиваться с проблемами при обработке большого количества файлов за раз.
  • Нагрузка на систему: При попытке удалить большое количество данных система может замедлять работу из-за ограничений ресурсов.
  • Ошибки ввода/вывода: Если некоторые файлы повреждены, это может привести к зависанию процессов удаления.

2. Способы решения проблемы

Использование терминала с различными командными флагами

  1. Терминал: Попробуйте использовать команду rm с флагами, которые будут принудительно и рекурсивно удалять файлы. Например:

    sudo rm -rf /path/to/your/folder

    Использование sudo запускает команду от имени администратора, что может помочь в случае прав доступа.

  2. Использование find: Попробуйте использовать утилиту find для удаления файлов по одной:

    find /path/to/your/folder -type f -delete

    Это может быть более эффективным, чем rm -rf, особенно при работе с большим числом файлов.

Удаление через сторонние утилиты

Если стандартные команды не сработали, рассмотрите использование сторонних программ для удаления файлов. Некоторые из программ, которые могут быть полезны:

  • AppCleaner: Программа для удаления приложений и связанных с ними файлов.
  • CleanMyMac: Позволяет удалять большие файлы и чистить систему.
  • Dr. Cleaner: Специализируется на оптимизации работы системы и удалении ненужных файлов.

Удаление в безопасном режиме

Попробуйте загрузить Mac в безопасном режиме:

  1. Выключите Mac.
  2. Включите его и немедленно удерживайте клавишу Shift, пока не увидите логотип Apple.
  3. В безопасном режиме попробуйте удалить папку.

3. Альтернативные методы

Использование скриптов

Если у вас есть опыты в программировании, рассмотрите возможность написания скрипта на Python, который будет удалять файлы пакетами, а не по одному. Например, следуйте коду, который использует os и shutil для удаления:

import os
import shutil

folder_to_delete = '/path/to/your/folder'

# Проверяем, существует ли папка
if os.path.exists(folder_to_delete):
    shutil.rmtree(folder_to_delete)  # Удаляет папку и всё содержимое
    print(f"Папка {folder_to_delete} успешно удалена.")
else:
    print(f"Папка {folder_to_delete} не найдена.")

4. Обратитесь в службу технической поддержки

Если ни один из вышеуказанных методов не работает, возможно, вам стоит обратиться в службу поддержки Apple или в сервисный центр. Они могут провести диагностику и помочь с удалением трудных файлов.

Заключение

Удаление больших объемов данных, таких как 350 ГБ и 58 миллионов файлов, может стать серьезным вызовом. Используйте предложенные методы и рекомендации для более эффективного удаления файлов. Не забывайте о возможности использования сторонних утилит или даже обращения к профессионалам, если проблема окажется слишком сложной. Удачи!

Оцените материал
Добавить комментарий

Капча загружается...