Como rsync apenas novos arquivos

144

Estou tentando configurar o rsync para sincronizar meu servidor web principal com o servidor remoto, adicionando o arquivo recém-gerado ao posterior.

Aqui está o comando que eu uso:

rsync -avh --update -e "ssh -i /path/to/thishost-rsync-key" remoteuser@remotehost:/foo/bar /foo/bar

Mas parece que o servidor web realmente transfere todos os arquivos, apesar do sinalizador '--update'. Eu tentei combinações diferentes de sinalizadores (por exemplo, omitindo '-a' e usando '-vv'), mas nenhuma ajudou. Então, querendo saber como posso modificar o comando rsync para enviar apenas os arquivos adicionados recentemente. obrigado

rsync

— supermario
fonte

2

Se você deseja sincronizar arquivos com o servidor remoto, não deve vir por último? ie rsync /foo/bar remoteuser@remotehost:/foo/bar

— ostrokach

Você pode se interessar por esta página da web . Além disso, tenha cuidado com o sistema de arquivos. Se o sistema de arquivos do servidor não suportar todas as -aopções implícitas (proprietário, grupo, permissões, ...), deve ser a causa do nosso problema.

— Ppr

2

Nenhuma das respostas resolve o problema em que os arquivos locais não foram totalmente copiados para o destino remoto e você só deseja sincronizar novamente os arquivos mais recentes.

— Axel Bregnsbo

Acabei de encontrar a -copção. Ignora os arquivos existentes com base em uma soma de verificação, em vez do tempo ou tamanho da modificação.

— haheute

181

De man rsync:

--ignore-existing       skip updating files that exist on receiver

--updatefaz algo um pouco diferente, e é provavelmente por isso que você está obtendo resultados inesperados (consulte man rsync):

Isso força o rsync a ignorar qualquer arquivo existente no destino e ter um horário modificado mais recente que o arquivo de origem . (Se um arquivo de destino existente tiver um tempo de modificação igual ao do arquivo de origem, ele será atualizado se os tamanhos forem diferentes.)

— Chris Down
fonte

11

Bem, na verdade eu tentei o comando com '--ignore-existente' em vez de '--update'. Terminou rapidamente, mas não coloca os novos arquivos no host remoto. Alguma ideia? Graças

— supermario

13

As páginas de manual são péssimas (é isso mesmo que eu fui lá), caso em questão, --ignore-existingsignifica não transferir arquivos que existem no receptor ou não transferir arquivos se algum arquivo / pasta com o mesmo nome existir no receptor?

— puk

7

--update não ignorar arquivos quando os mtimes são idênticos (que é não o que o texto sugere). Eu testei isso. Acredito que a redação seria melhor compreendida se dissesse "apenas os arquivos de origem mais recentes que o destino serão copiados".

— Octopus

4

@Octopus "apenas os arquivos de origem mais recentes que o destino serão copiados" ... ou os arquivos de origem que tenham o mesmo tempo de modificação que os arquivos de destino, mas que tenham tamanhos diferentes . Eu acho que esse é um ponto importante. (Chris já cobertas que, graças)

— Jonathan Komar

Então você precisa --ignore-existente e -r (recursivo). -v (detalhado) é bom ter também :-)

— DutchUncle

40

No meu caso, tive problemas semelhantes, tendo todos os arquivos transferidos em vez de apenas os modificados / novos. Eu resolvi isso usando parâmetros -t(em vez de -a) e -P(equivalente a --partial --progress):

destino de origem rsync -h -v -r -P -t

Isso transfere apenas novos arquivos e arquivos já existentes, mas modificados: -afunciona demais, como a sincronização de ID de grupo e usuário, que no meu caso não funciona, pois tenho diferentes usuários e grupos nos meus sistemas de origem e de destino.

Os parâmetros em detalhes:

-h: números legíveis por humanos
-v: verbose
-r: recursão em diretórios
-P: --partial(mantém arquivos parcialmente transferidos) +
--progress(mostra o progresso durante a transferência)
-t: preservar os tempos de modificação

— t0r0X
fonte

2

+1 para '-a faz também much` (na verdade -rlptgoD, de modo que a permissão se não flattended, grupos e proprietário preservada -não meu backup play-seguro típico ...)

— Frank Nocke

2

Pela minha experiência com o rsync, uma cópia de partição de 1 TB é muito grande para ser eficiente. Leva o rsync para sempre para processá-lo. Em vez disso, faça-o por subdiretórios. Ou seja, execute o rsync para cada subdiretório principal. Vai muito mais rápido se não precisar manipular dezenas de milhares de arquivos.

— turgut kalfaoglu
fonte

11

Talvez você ficou sem memória e seu sistema começou a trocar?

— Marcel Burkhard

-2

Experimentar

rsync -zvrt --update SOURCE DESTN

— ómega
fonte

8

Um pouco mais de explicação para o comando acima seria apreciada pelo OP.

— Peschke

a partir da página homem `-u, --update ignorar arquivos que são mais recentes no receiver`

— cadarço