scp ou sftp copiam vários arquivos com um único comando

Eu gostaria de copiar arquivos de / para servidor remoto em diferentes diretórios. Por exemplo, eu quero executar esses 4 comandos de uma só vez.

scp remote:A/1.txt local:A/1.txt
scp remote:A/2.txt local:A/2.txt
scp remote:B/1.txt local:B/1.txt
scp remote:C/1.txt local:C/1.txt

Qual é a maneira mais fácil de fazer isso?

Copie vários arquivos do remoto para o local:

$ scp your_username@remote.edu:/some/remote/directory/\{a,b,c\} ./

Copie vários arquivos do local para o remoto:

$ scp foo.txt bar.txt your_username@remotehost.edu:~
$ scp {foo,bar}.txt your_username@remotehost.edu:~
$ scp *.txt your_username@remotehost.edu:~

Copie vários arquivos de remoto para remoto:

$ scp your_username@remote1.edu:/some/remote/directory/foobar.txt \
your_username@remote2.edu:/some/remote/directory/

Fonte: http://www.hypexr.org/linux_scp_help.php

Do local para o servidor:

scp file1.txt file2.sh username@ip.of.server.copyto:~/pathtoupload

Do servidor para o local:

scp -T username@ip.of.server.copyfrom:"file1.txt file2.txt" "~/yourpathtocopy"

Você pode copiar diretórios inteiros usando a -ropção switch. Se você puder isolar seus arquivos no próprio diretório, poderá copiar tudo de uma vez.

scp -r ./dir-with-files user@remote-server:upload-path

scp -r user@remote-server:path-to-dir-with-files download-path

então por exemplo

scp -r root@192.168.1.100:/var/log ~/backup-logs

Ou, se houver apenas alguns deles, você pode usar:

scp 1.txt 2.txt 3.log user@remote-server:upload-path

Como Jiri mencionou, você pode usar scp -r user@host:/some/remote/path /some/local/pathpara copiar arquivos recursivamente. Isso pressupõe que haja um único diretório contendo todos os arquivos que você deseja transferir (e nada mais).

No entanto, o SFTP fornece uma alternativa se você deseja transferir arquivos de vários diretórios diferentes e os destinos não são idênticos:

sftp user@host << EOF
  get /some/remote/path1/file1 /some/local/path1/file1
  get /some/remote/path2/file2 /some/local/path2/file2
  get /some/remote/path3/file3 /some/local/path3/file3
EOF

Isso usa a sintaxe "aqui doc" para definir uma sequência de comandos de entrada SFTP. Como alternativa, você pode colocar os comandos SFTP em um arquivo de texto e executarsftp user@host -b batchFile.txt

As respostas com {file1,file2,file3}funcionam apenas com o bash (no controle remoto ou localmente)

A maneira real é:

scp user@remote:'/path1/file1 /path2/file2 /path3/file3' /localPath

Depois de jogar com o scp por um tempo, encontrei a solução mais robusta:

(Cuidado com as aspas simples e duplas)

Local para remoto:

scp -r "FILE1" "FILE2" HOST:'"DIR"'

Remoto para local:

scp -r HOST:'"FILE1" "FILE2"' "DIR"

Observe que o que for depois de "HOST:" será enviado para o controle remoto e analisado lá. Portanto, devemos garantir que eles não sejam processados ​​pelo shell local. É por isso que as aspas simples entram. As aspas duplas são usadas para manipular espaços nos nomes dos arquivos.

Se todos os arquivos estiverem no mesmo diretório, podemos usar * para corresponder a todos, como

scp -r "DIR_IN"/*.txt HOST:'"DIR"'
scp -r HOST:'"DIR_IN"/*.txt' "DIR"

Comparado ao uso da sintaxe "{}", que é suportada apenas por alguns shells, este é universal

A maneira mais simples é

local$ scp remote:{A/1,A/2,B/3,C/4}.txt ./

Portanto, a lista {..} pode incluir diretórios (A, B e C aqui são diretórios; "1.txt" e "2.txt" são nomes de arquivos nesses diretórios).

Embora copie todos esses quatro arquivos em um diretório local - não tenho certeza se é isso que você deseja.

No caso acima, você terminará os arquivos remotos A / 1.txt, A / 2.txt, B / 3.txt e C / 4.txt copiados para um único diretório local, com nomes de arquivo ./1.txt, ./2.txt, ./3.txt e ./4.txt

Problema : Copiando vários diretórios do servidor remoto para a máquina local usando um único comando SCP e mantendo cada diretório como está no servidor remoto.

Solução : o SCP pode fazer isso facilmente. Isso resolve o problema irritante de inserir a senha várias vezes ao usar o SCP com várias pastas. Consequentemente, isso também economiza muito tempo!

por exemplo

# copies folders t1, t2, t3 from `test` to your local working directory
# note that there shouldn't be any space in between the folder names;
# we also escape the braces.
# please note the dot at the end of the SCP command

~$ cd ~/working/directory
~$ scp -r username@contact.server.de:/work/datasets/images/test/\{t1,t2,t3\}  .

PS: Motivado por esta ótima resposta: scp ou sftp copiam vários arquivos com um único comando

Com base nos comentários, isso também funciona bem no Git Bash no Windows

Copie vários diretórios:

scp -r dir1 dir2 dir3 admin@127.0.0.1:~/

Você pode fazer desta maneira:

scp hostname@serverNameOrServerIp:/path/to/files/\\{file1,file2,file3\\}.fileExtension ./

Isso fará o download de todos os nomes de arquivos listados para qualquer diretório local em que você esteja.

Certifique-se de não colocar espaços entre cada nome de arquivo usando apenas uma vírgula ,.

NOTA: Peço desculpas antecipadamente por responder apenas a uma parte da pergunta acima. No entanto, achei esses comandos úteis para minhas necessidades atuais de unix.

Upload de arquivos específicos de uma máquina local para uma máquina remota:

~/Desktop/dump_files$ scp file1.txt file2.txt lab1.cpp etc.ext your-user-id@remotemachine.edu:Folder1/DestinationFolderForFiles/

Fazendo upload de um diretório inteiro de uma máquina local para uma máquina remota:

~$ scp -r Desktop/dump_files your-user-id@remotemachine.edu:Folder1/DestinationFolderForFiles/

Fazendo download de um diretório inteiro de uma máquina remota para uma máquina local:

~/Desktop$ scp -r your-user-id@remote.host.edu:Public/web/ Desktop/

No meu caso, estou restrito a usar apenas o comando sftp.
Então, eu tive que usar um arquivo em lote com o sftp. Eu criei um script como o seguinte. Isso pressupõe que você esteja trabalhando no diretório / tmp e deseja colocar os arquivos no sistema destdir_on_remote_system no sistema remoto. Isso também funciona apenas com um logon não interativo. Você precisa configurar chaves públicas / privadas para poder fazer login sem inserir uma senha. Mude conforme necessário.

#!/bin/bash

cd /tmp
# start script with list of files to transfer
ls -1 fileset1* > batchfile1
ls -1 fileset2* >> batchfile1

sed -i -e 's/^/put /' batchfile1
echo "cd destdir_on_remote_system" > batchfile
cat batchfile1 >> batchfile
rm batchfile1

sftp -b batchfile user@host

seu comando funciona perfeitamente, mas também quero alterar o nome do arquivo ao enviar o local para o remoto. Eu escrevi um comando: - sshpass -p senha scp /path/to/file.txt root @ hostname: /path/newfile.txt

Mas dá erro que /path/newfile.txt: Nenhum arquivo ou diretório encontrado foi encontrado por favor me ajude nessa situação

O scp usa ssh para transferência de dados com a mesma autenticação e fornece a mesma segurança que o ssh.

Uma prática recomendada aqui é implementar "SSH KEYS AND PUBLIC KEY AUTHENTICATION". Com isso, você pode escrever seus scripts sem se preocupar com autenticação. Simples assim.

Veja O QUE É SSH-KEYGEN

No caso específico em que todos os arquivos têm a mesma extensão, mas com sufixo diferente (por exemplo, número de arquivo de log), use o seguinte:

scp user_name@ip.of.remote.machine:/some/log/folder/some_log_file.* ./

Isso copiará todos os arquivos com o nome some_log_file da pasta especificada no controle remoto, ou seja, some_log_file.1, some_log_file.2, some_log_file.3 ....

scp remote:"[A-C]/[12].txt" local: