Perguntas com a marcação «awk»

No meu entendimento, o awk array é algo como python dict. Então, escrevo o código abaixo para explorá-lo: awk '{my_dict[$1] = $2} END { print my_dict}' zen E eu tenho: awk: can't read value of my_dict; it's an array name. Como a primeira coluna não é um número, como eu …

41 awk 

Eu tenho uma lista de diretórios e subdiretórios que contêm arquivos csv grandes. Existem cerca de 500 milhões de linhas nesses arquivos, cada um é um recorde. Eu gostaria de saber Quantas linhas existem em cada arquivo. Quantas linhas estão no diretório Quantas linhas no total Mais importante, eu preciso …

41 bash  awk  python  perl 

Fiz um alias do comando date para exibir a data no seguinte formato: 2013.06.14.12.10.02 usando este comando: alias date = date +"%Y.%m.%d.%H.%M.%S" Tudo funciona muito bem, exceto que eu quero remover os zeros à esquerda da saída. Não há como fazer isso alterando o formato. Eu acho que isso pode …

40 sed  awk  date 

Esse alinhamento remove linhas duplicadas da entrada de texto sem pré-classificação. Por exemplo: $ cat >f q w e w r $ awk '!a[$0]++' <f q w e r $ O código original que encontrei nas internets dizia: awk '!_[$0]++' Isso foi ainda mais desconcertante para mim, pois eu _tive …

40 shell-script  awk  scripting  sort  uniq 

Como posso pular as 6 primeiras linhas / linhas em um arquivo de texto (input.txt) e processar o restante com o awk? O formato do meu script awk (program.awk) é: BEGIN { } { process here } END { } Meu arquivo de texto é assim: 0 3 5 0.1 …

39 awk  gawk 

Em python re.sub(r"(?<=.)(?=(?:...)+$)", ",", stroke ) Para dividir um número por trigêmeos, por exemplo: echo 123456789 | python -c 'import sys;import re; print re.sub(r"(?<=.)(?=(?:...)+$)", ",", sys.stdin.read());' 123,456,789 Como fazer o mesmo com o bash / awk?

37 bash  shell-script  awk  string 

Usando uma ferramenta de linha de comando comum como sed ou awk, é possível juntar todas as linhas que terminam com um determinado caractere, como uma barra invertida? Por exemplo, dado o arquivo: foo bar \ bash \ baz dude \ happy Gostaria de obter esta saída: foo bar bash …

36 text-processing  awk  sed  perl 

Estou procurando o método mais simples para imprimir a linha mais longa em um arquivo. Eu pesquisei no Google e surpreendentemente não consegui encontrar uma resposta. Frequentemente, imprimo o comprimento da linha mais longa em um arquivo, mas não sei como realmente imprimir a linha mais longa. Alguém pode fornecer …

35 bash  awk  filter 

Estou tentando grepo andamento taildo log de arquivo e obtemos a npalavra th de uma linha. Arquivo de exemplo: $ cat > test.txt <<EOL Beam goes blah John goes hey Beam goes what? John goes forget it Beam goes okay Beam goes bye EOL ^C Agora, se eu fizer um …

34 bash  grep  rhel  awk  tail 

Tenho file1 gosta: 0 AFFX-SNP-000541 NA 0 AFFX-SNP-002255 NA 1 rs12103 0.6401 1 rs12103_1247494 0.696 1 rs12142199 0.7672 E um arquivo2: 0 AFFX-SNP-000541 1 0 AFFX-SNP-002255 1 1 rs12103 0.5596 1 rs12103_1247494 0.5581 1 rs12142199 0.4931 E gostaria de um arquivo3 que: 0 AFFX-SNP-000541 NA 1 0 AFFX-SNP-002255 NA 1 …

33 text-processing  awk  join  bioinformatics 

Eu tenho um problema extremo e todas as soluções que posso imaginar são complicadas. De acordo com minha experiência em UNIX / Linux, deve haver uma maneira fácil. Quero excluir os primeiros 31 bytes de cada arquivo /foo/. Cada arquivo é longo o suficiente. Bem, tenho certeza de que alguém …

32 text-processing  files  sed  awk 

Eu tenho o seguinte arquivo: id name age 1 ed 50 2 joe 70 Quero imprimir apenas o ide agecolunas. Agora eu apenas uso awk: cat file.tsv | awk '{ print $1, $3 }' No entanto, isso requer conhecer os números das colunas. Existe uma maneira de fazer isso onde …

32 awk 

File1 conteúdo: line1-file1 "1" line2-file1 "2" line3-file1 "3" line4-file1 "4" File2 conteúdo: line1-file2 "25" line2-file2 "24" Pointer-file2 "23" line4-file2 "22" line5-file2 "21" Após a execução do script perl / shell, o File2conteúdo deve se tornar: line1-file2 "25" line2-file2 "24" line1-file1 "1" line2-file1 "2" line3-file1 "3" line4-file1 "4" Pointer-file2 "23" line4-file2 …

32 text-processing  awk  sed  perl 

Eu tenho um arquivo chamado Element_querycontendo o resultado de uma consulta: SQL> select count (*) from element; [Output of the query which I want to keep in my file] SQL> spool off; Eu quero excluir a primeira linha e a última linha usando o comando shell.

31 shell  sed  awk  grep  pipe 

Dado: existem 40 colunas em um registro. Quero substituir a 35ª coluna para que ela seja substituída pelo conteúdo da 35ª coluna e pelo símbolo "$". O que veio à mente é algo como: awk '{print $1" "$2" "...$35"$ "$36...$40}' Funciona, mas porque é inviável quando o número de colunas …

31 linux  text-processing  awk  replace