Perguntas com a marcação «split»

Respostas relacionadas, mas sem respostas satisfatórias: Como posso dividir um arquivo de texto grande em pedaços de 500 palavras ou mais? Estou tentando pegar um arquivo de texto ( http://mattmahoney.net/dc/text8.zip ) com> 10 ^ 7 palavras, tudo em uma linha, e dividi-lo em linhas com N palavras cada. Minha abordagem …

11 text-processing  sed  awk  split 

Eu tenho uma árvore de diretórios que gostaria de fazer backup em discos ópticos. Infelizmente, excede o tamanho de qualquer disco (cerca de 60 GB). Estou procurando um script que divida essa árvore em pedaços de tamanho apropriado com links físicos ou outros enfeites (deixando o original intocado). Eu poderia …

11 backup  disk-usage  split  burning 

Eu tenho três tipos de dados que estão em formatos diferentes; para cada tipo de dado, existe um script Python que o transforma em um único formato unificado. Esse script Python é lento e vinculado à CPU (para um único núcleo em uma máquina com vários núcleos), então eu quero …

10 text-processing  pipe  split  parallelism 

Eu tinha um grande arquivo compactado (~ 60G) ( tar.gz). Costumava splitdividi-lo em 4 partes e depois catjuntá-los novamente. No entanto, agora, quando estou tentando estimar o tamanho do arquivo descompactado, ele é menor que o original? Como isso é possível? $ gzip -l myfile.tar.gz compressed uncompressed ratio uncompressed_name 60680003101 …

9 compression  gzip  split 

Eu tenho um grande arquivo de texto (~ 50 GB quando gz'ed). O arquivo contém 4*Nlinhas ou Nregistros; ou seja, todo registro consiste em 4 linhas. Gostaria de dividir este arquivo em 4 arquivos menores, cada um com aproximadamente 25% do arquivo de entrada. Como posso dividir o arquivo no …

9 text-processing  sed  awk  split  wc 

Estou carregando um arquivo gigantesco em um banco de dados postgresql. Para fazer isso, primeiro uso splitno arquivo para obter arquivos menores (30 GB cada) e, em seguida, carrego cada arquivo menor no banco de dados usando GNU Parallele psql copy. O problema é que leva cerca de 7 horas …

9 files  split  gnu-parallel 

Eu quero dividir 'hello'em h e l l oem uma matriz usando apenas bash, eu poderia fazê-lo em sed com sed 's/./& /g'mas eu quero saber como dividir uma string em um array em Bash quando eu não sei o que o delimitador seria, ou o delimitador é qualquer caractere …

9 bash  string  split 

Eu tenho um arquivo que se parece com o seguinte: chr19 61336212 + 0 0 CG CGT chr19 61336213 - 0 0 CG CGG chr19 61336218 + 0 0 CG CGG chr19 61336219 - 0 0 CG CGC chr19 61336268 + 0 0 CG CGG chr19 61336269 - 0 0 …

8 text-processing  awk  split 

Eu tenho um arquivo .msg bastante grande formatado no formato UIEE. $ wc -l big_db.msg 8726593 big_db.msg Essencialmente, o arquivo é composto de entradas de vários tamanhos que se parecem com isso: UR|1 AA|Condon, Richard TI|Prizzi's Family CN|Collectable- Good/Good MT|FICTION PU|G.P. Putnam & Sons DP|1986 ED|First Printing. BD|Hard Cover NT|0399132104 …

8 text-processing  split 

Como faço para o K3b dividir volumes em várias mídias? Por exemplo, se eu der uma pasta com 6 GB (não um arquivo de 6 GB), ele deverá criar vários discos de 4,4 GB automaticamente, em vez de eu fazer manualmente? Se o K3B não puder fazer isso, existe algum …

8 iso  split  mkisofs