Como posso diminuir o rsync?

Estou tentando copiar o conteúdo de um pen drive USB com falha. Se eu ler os dados muito rápido, o chip do controlador da unidade superaquecerá e a unidade desaparecerá do sistema. Quando isso acontece, preciso desconectar a unidade, aguardar mais ou menos um minuto para que ela esfrie, reconectá-la e reiniciar a cópia.

Eu tenho um backup antigo do conteúdo da unidade, então a maneira óbvia de obter o restante dos dados é usar rsyncpara atualizar o backup, mas isso ocorre em toda a leitura "muito rápido, a unidade desaparece e preciso começar de novo ". Existe uma maneira de dizer rsyncpara ler apenas X megabytes de dados por minuto? Como alternativa, é possível pedir para suspender as operações quando a unidade desaparecer e continuar quando for reconectada?

Diferentemente da experiência do DopeGhoti, a --bwlimitflag limita a transferência de dados, com o meu rsync (v3.1.2).

teste:

$ dd if=/dev/urandom bs=1M count=10 of=data
10+0 records in
10+0 records out
10485760 bytes (10 MB, 10 MiB) copied, 0.0871822 s, 120 MB/s

$ du -h data
10M     data

$ time rsync -q data fast
0.065 seconds

$ time rsync -q --bwlimit=1M data slow
10.004 seconds

(nota: minha timesaída parece diferente da maioria das timechamadas ( zshrecurso), esses horários não foram editados por mim)

Else, talvez algo ao longo das linhas de um duplo -execno find. Eu acredito que rsync -Rdeve criar e copiar as pastas pai, mas se não, então cp --parentsdeve.

$ find /failing/usb -exec rsync -R {} /somewhere/safe/ \; -exec sleep 1 \;

Nota : verifique também ddrescue , pode estar certo o que você está procurando :)

Um pouco de uma solução MacGyver, mas tive um bom sucesso com ela no passado:
coloque um hub USB 1 antigo entre o stick e o computador. De jeito nenhum ele vai copiar rápido dessa maneira :-)

Outra possibilidade: se você tiver outro stick disponível, coloque-o em outra porta USB conectada ao mesmo hub raiz (para compartilhar a largura de banda com o stick com problema).
Agora inicie uma grande operação de gravação no stick extra, para que ambos estejam competindo pela largura de banda. Para maior controle, você pode usar o ionice para diminuir ainda mais a prioridade no stick do problema.

Você pode usar rsync --bwlimit=RATEpara acelerar a velocidade de transferência de arquivos que, com base nos comentários abaixo, parece funcionar especificamente ao limitar a velocidade de leitura dos dados, que é exatamente o que você está procurando.

Além de soluções, além rsync --bwlimit=100de 100KiB / s.

1. Use ddrescuecom a --max-read-rateopção para uma cópia completa do disco. Isso também permitirá que você reinicie uma cópia completa do disco, onde parou após um erro.

   ddrescue --max-read-rate=100K /failing/usb output.img output.logfile
   

ddrescuetambém possui muitas outras opções relevantes para a recuperação de dados, consulte o manual aqui .

2. Use pv("visualizador de tubos") com a --rate-limitopção ou a throttleferramenta para classificar tubos limite. pvtambém pode mostrar progresso. Você pode fazer isso funcionar para qualquer ferramenta que use um tubo ou um tubo:

   tar -cf - /failing/usb | throttle -K 100 | tar -C /your/outputfolder/ -xvf -
   

   ou

   tar -cf - /failing/usb | pv --rate-limit 100k | tar -C /your/outputfolder/  -xvf -
   

   Dê uma olhada na página de manual pv para mais configurações e exemplos. Para throttle, você também pode experimentar a -wopção, que determina como a velocidade é calculada, consulte a página de manual do acelerador .