Clone a partição inteira ou o disco rígido para um arquivo esparso

Eu gosto de clonar uma partição inteira ou um disco rígido inteiro em um disco externo maior, mas gosto de criar um arquivo esparso. Costumo usar ddpara clonagem, mas ele não suporta arquivos esparsos. Como solução alternativa, usei algo como:

cp --sparse=always <(dd if=/dev/sda1 bs=8M) /mount/external/backup/sda1.raw

No entanto, isso é um pouco complicado para o meu gosto e não me permite retomar o processo se abortado. É engraçado que exista uma ferramenta NTFS para isso ( ntfsclone), mas essa ferramenta não existe para os sistemas de arquivos nativos do Linux (EXT2-4).

Existe alguma ferramenta melhor para isso, por exemplo, uma ddvariante com suporte escasso? Não procuro algum software proprietário para backups em disco, mas simplesmente desejo fazer uma cópia esparsa de clone que possa montar como dispositivo de loop, se necessário.

Você quer dd_rescue.

dd_rescue -a -b 8M /dev/sda1 /mount/external/backup/sda1.raw

Apenas para completar, a chamada para ddrescue . O sinalizador --sparseou -Spermite que o destino seja gravado esparsamente:

$ ddrescue -S -b8M /dev/sda1 /mount/external/backup/sda1.raw

Ou com opção longa:

$ ddrescue --sparse --block-size 8M /dev/sda1 /mount/external/backup/sda1.raw

Ou se você prefere MiBs :

$ ddrescue -S -b8Mi /dev/sda1 /mount/external/backup/sda1.raw

Para permitir que o resgate seja interrompido e retomado, você também pode usar um arquivo de log:

$ ddrescue -S -b8Mi /dev/sda1 /mount/external/backup/sda1.raw ~/sda1.rescue.log

Note que GNU ddrescuee dd_rescuesão programas diferentes. Mas o GNU ddrescueparece ser mais difundido. Por exemplo, ele já está empacotado com GRML .

Houve um patch oferecido em 2007 para fornecer suporte a arquivos esparsos no GNU dd, mas parece que ele não foi convertido em coreutils (pelo menos não no 8.4). Duvido que o dd tenha mudado muito desde então, o patch pode se aplicar à versão atual sem muito trabalho.

Também estou realmente impressionado com o uso criativo de cpsua pergunta, e isso me colocou no caminho de usá-lo para realizar a retomada (retomando aqui de ~ 80M na fonte):

cp --sparse=always \
  <(dd if=/dev/sda1 bs=8M skip=10) /dev/stdout \
  | dd bs=8M seek=10 of=/mount/external/backup/sda1.raw

Edit: arranhar isso. O segundo dd, é claro, estaria procurando a posição errada no arquivo de saída, já que não tem o mesmo comprimento que a entrada.

Apenas adicionando meus 2 centavos. Outra maneira de criar um arquivo esparso a partir de um disco bruto é com o qemu-img usando algo como:

qemu-img convert -f raw /dev/sda /tmp/sda.raw

Você pode usar isso em uma única partição também. Além disso, você tem a opção de converter o disco / partição bruta para qualquer outro formato que o qemu-img suporte (QCOW2, VHD [x], vmdk, etc)

Outra opção é rsync . Por exemplo:

rsync -SP --copy-devices /dev/sda1 /mount/external/backup/sda1.raw

Explicação:

• -S/ --sparsepara pular blocos esparsos na gravação
• -P/ --partial --progresspara mostrar progresso e manter arquivos parcialmente transferidos
• --copy-devices copiar o conteúdo do dispositivo

Você pode adicionar --appendpara continuar uma cópia interrompida (ou --append-verifypara confirmar a soma de verificação nas correspondências de dados novos e antigos).

Edit : Acabei de perceber que o copy-devices.diff está em consideração e pode não estar presente em muitos sistemas (embora esteja incluído no Fedora , Ubuntu , Debian e outros)

Nota: isso não funciona pelos motivos descritos nos comentários, estou deixando aqui para referência.

Monitore as estatísticas do dd usando kill -USR1:

$ cp --sparse=always <(dd if=/dev/urandom bs=8M) \
    /mount/external/backup/sda1.raw&
$ watch kill -USR1 `pidof -s /bin/dd`

Continue usando skip / seek:

$ i_bytes= # get from the last dd statistic
$ o_bytes=`du -b /mount/external/backup/sda1.raw | cut -f 1`   
$ cp --sparse=always <(dd if=/dev/urandom bs=8M skip=$i_bytes \
    seek=$o_bytes) /mount/external/backup/sda1.raw&
$ watch kill -USR1 `pidof -s /bin/dd`

Sem $ i_bytes, seria mais difícil retomar. Provavelmente, é mais fácil registrar as estatísticas do dd em um arquivo, caso a máquina travar ou algo assim.

Existem xfsdump e xfsrestore para XFS, que é um sistema de arquivos Linux nativo há bastante tempo.

Por que não simplesmente:

cp --sparse=always /dev/sda1 /mount/external/backup/sda1.raw