Сжатие больших файлов

Question

Я пытаюсь сжать большие наборы данных (от 15-400 ГБ каждый). Я ищу лучшее программное обеспечение для сжатия для Mac, которое имеет

1. Высокая степень сжатия.
2. Это быстро

Я пробовал 7zX, который имеет отличную степень сжатия в настройках Ultra, но очень медленный. Интересно, смогу ли я изменить настройки, чтобы это

1. использует все ядра, которые у меня есть
2. максимальная оперативная память
3. и максимальный процессор.

Так что я могу сократить это время. Или, если есть другое программное обеспечение, которое предлагает эту опцию. Конечно, если кто-нибудь может порекомендовать какое-нибудь лучшее программное обеспечение, я был бы рад получить его здесь.

Также о рабочих процессах о том, как обращаться с большими файлами, которые должны быть сжаты / распакованы позже.

Благодарю.

Answer 1

Существуют версии bzip (pigz) и bzip2 (pbzip2), которые являются многопоточными. Оба будут использовать 100% всех ядер.

Использование максимального объема ОЗУ не имеет смысла, и для запуска алгоритмов потребуется столько, сколько нужно, а не больше.

Какой алгоритм лучше, зависит от вашего варианта использования и данных, но pigz, вероятно, будет одним из самых быстрых и 7z одним из самых медленных, но с лучшей степенью сжатия.