Perguntas com a marcação «text-processing»

Substituir seqüências de caracteres em arquivos com base em determinados critérios de pesquisa é uma tarefa muito comum. Como posso substituir string foopor bartodos os arquivos no diretório atual? fazer o mesmo recursivamente para subdiretórios? substituir apenas se o nome do arquivo corresponder a outra sequência? substituir apenas se a …

751 text-processing  awk  sed  perl 

Ouvi dizer que printfé melhor que echo. Só me lembro de uma instância da minha experiência em que tive que usar printfporque echonão funcionou para inserir algum texto em algum programa do RHEL 5.8, mas printffuncionou. Mas, aparentemente, existem outras diferenças, e eu gostaria de saber o que são e …

547 text-processing  echo  printf 

Estou escrevendo um script bash para procurar um arquivo, se ele não existir, crie-o e acrescente-o: Host localhost ForwardAgent yes Então "line then new line 'tab' then text"eu acho que é um formato sensível. Eu sei que você pode fazer isso: cat temp.txt >> data.txt Mas parece estranho desde suas …

301 shell  text-processing  io-redirection 

Digamos que eu tenho um arquivo: # file: 'test.txt' foobar bash 1 bash foobar happy foobar Eu só quero saber quais palavras aparecem depois de "foobar", para que eu possa usar este regex: "foobar \(\w\+\)" Os parênteses indicam que tenho um interesse especial pela palavra logo após foobar. Mas quando …

293 text-processing  grep  regular-expression 

O uso de um loop while para processar o texto geralmente é considerado uma má prática nos shells POSIX? Como Stéphane Chazelas apontou , algumas das razões para não usar o loop de shell são conceitual , confiabilidade , legibilidade , desempenho e segurança . Esta resposta explica os aspectos …

196 shell  text-processing 

Como você classifica du -sh /dir/*por tamanho? Li um site que dizia uso, | sort -nmas obviamente isso não está certo. Aqui está um exemplo que está errado. [~]# du -sh /var/* | sort -n 0 /var/mail 1.2M /var/www 1.8M /var/tmp 1.9G /var/named 2.9M /var/run 4.1G /var/log 8.0K /var/account 8.0K …

196 command-line  text-processing  disk-usage  sort  units 

Usando sistemas de controle de versão, fico aborrecido com o barulho quando o diff diz No newline at end of file. Então, eu estava pensando: como adicionar uma nova linha no final de um arquivo para se livrar dessas mensagens?

190 bash  shell  text-processing  newlines 

Gostaria de remover todos os espaços e guias à esquerda e à direita de cada linha de uma saída. Existe uma ferramenta simples como trimeu poderia canalizar minha saída? Arquivo de exemplo: test space at back test space at front TAB at end TAB at front sequence of some space …

155 shell-script  text-processing  pipe  whitespace 

Sei que posso usar algo como cat test.txt | pr -w 80quebrar linhas com 80 caracteres de largura, mas isso coloca muito espaço na parte superior e inferior das linhas impressas e não funciona em alguns sistemas Qual é a melhor maneira de forçar um arquivo de texto com linhas …

142 text-processing 

Eu tenho um arquivo de texto enorme (70 GB), uma linha , e quero substituir uma string (token) nele. Quero substituir o token <unk>por outro fictício ( problema de luva ). Eu tentei sed: sed 's/<unk>/<raw_unk>/g' < corpus.txt > corpus.txt.new mas o arquivo de saída corpus.txt.newpossui zero bytes! Eu também …

126 text-processing  sed  large-files 

Um enorme arquivo de texto (com até 2 GiB) contém cerca de 100 duplicatas exatas de cada linha (inútil no meu caso, pois o arquivo é uma tabela de dados semelhante a CSV). O que eu preciso é remover todas as repetições enquanto (de preferência, mas isso pode ser sacrificado …

126 files  text-processing  large-files 

Eu quero analisar uma variável (no meu caso, é a versão do kit de desenvolvimento) para torná-la .livre de pontos ( ). Se version='2.3.3', a saída desejada é 233. Eu tentei como abaixo, mas ele precisa .ser substituído por outro personagem que me dê 2_3_3. Teria sido bom se tr …

123 bash  text-processing 

Portanto, abrir um arquivo cate usá grep-lo para obter linhas correspondentes só me leva a um ponto em que estou trabalhando com o conjunto de logs específico com o qual estou lidando. Ele precisa de uma maneira de corresponder linhas a um padrão, mas apenas para retornar a parte da …

109 text-processing  sed  grep 

Quero decodificar a codificação de URL, existe alguma ferramenta interna para fazer isso ou alguém poderia me fornecer um sedcódigo que faça isso? Pesquisei um pouco no unix.stackexchange.com e na Internet, mas não consegui encontrar nenhuma ferramenta de linha de comando para decodificar a codificação de URL. O que eu …

101 shell-script  text-processing  sed  url 

Existe uma ferramenta padrão que converte uma contagem inteira de bytes em uma contagem legível por humanos do maior tamanho de unidade possível, mantendo o valor numérico entre 1,00 e 1023,99? Eu tenho meu próprio script bash / awk, mas estou procurando uma ferramenta padrão , encontrada em muitas / …

94 text-processing  utilities  units