Como você define o tamanho do bloco bzip2 ao usar o tar?

Estou usando tarpara fazer backup de um servidor linux em fita. Estou usando a -jopção para compactar o arquivo bzip2, no entanto, não vejo uma maneira de ajustar as opções de tamanho de bloco para o bzip2 do tar. O tamanho do bloco padrão é 900.000 bytes, o que proporciona a melhor compactação, mas é o mais lento. Não estou tão preocupado com a taxa de compactação, por isso estou procurando fazer o bzip2 rodar mais rápido com um tamanho de bloco menor.

export BZIP=--fast
tar cjf foo.tar.bz2 foo

Ou canalize a saída de tarpara bzip2.

Embora você deva observar na página de manual do bzip2:

    -1 (ou - rápido) a -9 (ou - melhor)
              Defina o tamanho do bloco como 100 k, 200 k .. 900 k ao compactar.
              Não tem efeito ao descomprimir. Veja GERENCIAMENTO DE MEMÓRIA abaixo.
              Os aliases --fast e --best destinam-se principalmente ao GNU gzip
              flexibilidade. Em particular, --fast não torna as coisas significativas
              notavelmente mais rápido. E --best simplesmente seleciona o comportamento padrão.

tar -cjf dir.tar.bz2 --options bzip2:compression-level=9 path/to/dir/

bzip2 tamanhos de bloco

bzip2tem algumas opções de tamanho de bloco. Na página do manual bzip2(1):

-1 (or --fast) to -9 (or --best)
       Set the block size to 100 k, 200 k ..  900 k when compressing.
       Has no effect when decompressing. See MEMORY MANAGEMENT below.
       The --fast and --best aliases are primarily for GNU gzip
       compatibility. In particular, --fast doesn't make things
       significantly faster. And --best merely selects the default
       behaviour.

Como você deseja uma compactação mais rápida, com menos consideração à taxa de compactação, usando bzip2, parece que deseja a opção -1(ou --fast).

Definir o bzip2tamanho do bloco ao usartar

Você pode definir o bzip2tamanho do bloco ao usá tar-lo de duas maneiras.

A maneira UNlX

Minha maneira favorita, a maneira UNlX, é aquela em que você usa todas as ferramentas independentemente e as combina através de tubos.

$ tar --create [FILE...] | bzip2 -1 > [ARCHIVE].tar.bz2

Você pode ler isso como "criar .tar com tar-> bzip-lo com bzip2-> escrever para [ARCHIVE].tar.bz2".

Variável de ambiente

Também é possível definir bzip2opções através da variável de ambiente BZIP2. Na página do manual bzip2(1):

bzip2 will read arguments from the environment variables BZIP2 and BZIP,
in that order, and will process them before any arguments read from the
command line. This gives a convenient way to supply default arguments.

Então, para usar isso tar, você pode, por exemplo:

$ BZIP2=-1 tar --create --bzip2 --file [ARCHIVE].tar.bz2 [FILE...]

Alternativas mais rápidas

bzip2usa um algoritmo de compactação lenta. Se você está preocupado com a velocidade, pode investigar algoritmos alternativos, como os usados ​​por gzipou lzop. Aqui está um bom artigo comparando ferramentas de compactação: https://aliver.wordpress.com/2010/06/22/huge-unix-file-compresser-shootout-with-tons-of-datagraphs/

Envie a tarsaída para stdoute, em seguida, passe-a bzip2separadamente:

% tar cvf - _file_ | bzip2 _opts_ > output.tar.bz2

É ainda mais fácil:

% tar -cvf dir.tar path/to/dir/ && bzip2 -9 dir.tar