Perguntas com a marcação «wget»

Eu tenho um servidor nos EUA (caixa B do Linux) e meu PC doméstico (caixa A do Linux) e preciso fazer o download de um arquivo do site C, O problema é que é muito lento o download de um arquivo diretamente de A, portanto, preciso fazer o download do …

31 ssh  wget 

Qual é o formato Netscape de wget's cookies.txt? Preciso espelhar um site que exija login. Eu uso uma extensão do Chrome que retorna cookies nesse formato, eu os salvei cookies.txt, importei com o wgetcomando, mas sem uso, ele apenas baixa o conteúdo como se eu não estivesse logado. Agradeço qualquer …

31 wget 

Estou procurando uma maneira de mostrar todos os URLs em uma cadeia de redirecionamento, de preferência do shell. Eu encontrei uma maneira de quase fazer isso com curl, mas mostra apenas o primeiro e o último URL. Eu gostaria de ver todos eles. Deve haver uma maneira de fazer isso …

29 wget  curl 

Como baixar um site completo, mas ignorando todos os arquivos binários. wgetpossui essa funcionalidade usando o -rsinalizador, mas faz o download de tudo e alguns sites são demais para uma máquina com poucos recursos e não são de uso pelo motivo específico em que estou baixando o site. Aqui está …

22 wget  recursive  download  mime-types 

Se não quiser baixar manualmente os arquivos encontrados em um caminho de URL específico, que opções tenho? O uso de curingas falha: $ wget 'http://www.shinken-monitoring.org/pub/debian/*deb' Warning: wildcards not supported in HTTP. .... É claro que isso pressupõe que eu não conheço os nomes dos arquivos com antecedência.

22 wildcards  wget 

Estou baixando wgetusando um link lento. Às vezes, a barra de progresso fica assim: 15% [+++++++++++++++===> ] 10,582,848 --.-K/s in 82s Qual é o significado de "+"?

21 wget 

Atualmente, tenho um script de shell em execução em um servidor Linux que está usando o wget in oder para baixar uma página da Web remota. Isso, por sua vez, é executado por uma tarefa agendada para ser executada em determinados horários. Alguém pode confirmar que a adição da -qopção …

19 linux  shell  wget 

Fiquei me perguntando se wgetera possível fazer o download de um RPM e depois canalizá-lo sudo rpm -ipara instalá-lo, em uma única linha? Eu percebo que eu poderia simplesmente correr: wget -c <URL> sudo rpm -i <PACKAGE-NAME>.rpm para instalar o pacote, mas eu queria saber se seria possível fazer isso …

18 pipe  rpm  wget 

Eu me deparei com este site que fala sobre isso. Então, ao baixar o site inteiro, obtendo a versão compactada, qual é o comando certo? Eu testei este comando, mas não sei se o wget realmente está recebendo a versão compactada em gzip: wget --header="accept-encoding: gzip" -m -Dlinux.about.com -r -q …

18 wget 

Como usar o wget para baixar arquivos do Onedrive? (e arquivos em lote e pastas inteiras, se possível)

17 wget  download  batch-jobs 

Se eu tentar o wget em uma página da web, estou recebendo a página como html. É possível recuperar apenas o texto de um arquivo sem o html associado? (Isso é necessário para mim, pois algumas das páginas HTML contêm o programa c que está sendo baixado com tags html. …

17 linux  wget 

Estou interessado em um único comando que baixaria o conteúdo de um torrent (e talvez participe como uma semente após o download, até que eu o pare). Geralmente, existe um daemon cliente-torrent que deve ser iniciado separadamente antecipadamente e um cliente para controlar (como transmission-remote). Mas estou procurando a simplicidade …

16 command-line  wget  download  bittorrent  protocols 

Estou tentando baixar arquivos deste site . O URL é: http://www.ncbi.nlm.nih.gov/geo/download/?acc=GSE48191&format=file Quando eu uso este comando: wget http://www.ncbi.nlm.nih.gov/geo/download/?acc=GSE48191&format=file Eu recebo apenas o index.html?acc=GSE48191que é algum tipo de formato binário. Como posso baixar os arquivos deste site HTTP?

15 wget 

Gostaria basicamente de canalizar um wgetcomando para um arquivo em um servidor remoto por SSH. Como posso fazer isso? Sei que poderia simplesmente sshentrar no servidor e fazer o download do arquivo, mas prefiro usar a máquina local para fazer o download e enviá-lo.

14 ssh  wget 

Estou executando milhares de processos de segundo plano curl em paralelo no seguinte script bash START=$(date +%s) for i in {1..100000} do curl -s "http://some_url_here/"$i > $i.txt& END=$(date +%s) DIFF=$(( $END - $START )) echo "It took $DIFF seconds" done Eu tenho 49Gb Corei7-920 servidor dedicado (não virtual). Eu rastreio …

14 linux  performance  bash  curl  wget