Perguntas com a marcação «text-processing»

Eu tenho tentado escrever um script bash simples que eu vou usar para instalar um aplicativo e atualizar seu arquivo de configuração. Estou tendo dificuldade para obter o arquivo de configuração modificado. # DBHost=localhost DBName=test # DBPassword= alguma sugestão como eu posso ficar acima modificado como abaixo? DBHost=localhost DBName=database DBPassword=password

9 bash  shell-script  text-processing  configuration 

Estou tentando executar uma verificação do PEP8 em uma grande árvore de origem. A árvore é composta de uma mistura de arquivos em vários idiomas. A idéia é verificar todos os scripts Python sem precisar listá-los explicitamente. A maioria desses arquivos não tem .pyextensão. Existe uma maneira simples de encontrar …

9 shell-script  text-processing  search 

Estou tão farto de espaços inúteis nos arquivos de origem que até configurei o vim para mostrá-los. O problema é que muitas vezes (se não sempre) tenho que lidar com espaços inúteis com os desenvolvedores de meus companheiros. Gostaria apenas de verificar os arquivos de origem (com uma expressão regular) …

9 shell-script  text-processing 

Eu tenho que criar regularmente mais de 100 arquivos de texto a partir de modelos. Atualmente, uso um shell script excessivamente complicado. Eu acho que existe uma maneira mais inteligente de lidar com isso, mas não sei como. Eu tenho um "banco de dados": # outputfile template data1 data2 data3 …

9 shell-script  text-processing 

Eu tenho um arquivo html com muito texto UTF-8 codificado em% em URLs. Por exemplo, "% D1% 80% D0% B5% D1% 81% D1% 83% D1% 80% D1% 81% D1% 8B" significa "ресурсы" ("recursos" em russo). A tarefa é substituir todas essas substrings por texto UTF-8 legível. Para simplificar a tarefa, …

9 text-processing  character-encoding  text  unicode 

Aqui está um trecho do INPUT: ... #################### Bala Bela;XXXXXX12345;XXXXXX12345678;A SERVER345Z3.DOMAIN.com0 SERVER346Z3.DOMAIN.com0 SERVER347Z3.DOMAIN.com0 SERVER348Z3.DOMAIN.com0 ssh-dss ...pubkeyhere... #################### Ize Jova;XXXXXX12345;XXXXXX12345;A SERVER342Z3.DOMAIN.com0 SERVER343Z3.DOMAIN.com0 SERVER345Z3.DOMAIN.com0 ssh-rsa ...pubkeyhere... ... E aqui está um trecho da saída que eu preciso: Bala Bela;XXXXXX12345;XXXXXX12345678;A 4 Ize Jova;XXXXXX12345;XXXXXX12345;A 3 Então, eu preciso de uma saída do INPUT, para …

9 bash  text-processing 

Eu queria saber se existem ferramentas genéricas de plotagem disponíveis na caixa de ferramentas unix? Ao plotar, quero dizer barras simples ou coisas que você vê em muitos utilitários baseados em maldições. E por caixa de ferramentas unix, quero dizer coisas que você pode canalizar dados para elas usando convenções …

9 text-processing  logs  plotting 

O ambiente Unix possui excelentes ferramentas para analisar texto de várias formas. No entanto, ultimamente, os dados não estão nos formatos tradicionais (históricos) (CSV, TSV, baseados em registros ou outros delimitadores) que costumavam ser antes. Atualmente, os dados são trocados em formatos estruturados como XML / JSON. Eu sei que …

9 text-processing  xml 

Eu tenho um programa texcountque gera o número de palavras no meu documento LaTeX. Também posso canalizar a saída disso para sedcriar novas linhas de quebra de linha TeX e gravar isso em um arquivo que eu possa incluir no meu documento final. Mas quando eu faço texcount foo.tex | …

9 shell  text-processing  utilities 

Como remover o último separador de vírgulas de um arquivo no Linux? Exemplo de arquivo: "is_supported_kafka_ranger" : "true", "kafka_log_dir" : "/var/log/kafka", "kafka_pid_dir" : "/var/run/kafka", "kafka_user" : "kafka", "kafka_user_nofile_limit" : "128000", "kafka_user_nproc_limit" : "65536", resultados esperados: "is_supported_kafka_ranger" : "true", "kafka_log_dir" : "/var/log/kafka", "kafka_pid_dir" : "/var/run/kafka", "kafka_user" : "kafka", "kafka_user_nofile_limit" : "128000", …

9 text-processing  awk  sed  perl 

Eu tenho ~ 30k arquivos. Cada arquivo contém ~ 100k linhas. Uma linha não contém espaços. As linhas em um arquivo individual são classificadas e duplicadas gratuitamente. Meu objetivo: quero encontrar todas as linhas duplicadas em dois ou mais arquivos e também os nomes dos arquivos que continham entradas duplicadas. …

9 shell-script  text-processing  performance  large-files  deduplication 

Eu tenho uma coleção de arquivos (* .zip, * .txt, * .tar.gz, * .doc, ... etc). Esses arquivos residem em um caminho. Quero encontrar todos os arquivos (* .txt) e depois copiar apenas os arquivos de texto que contêm palavras específicas (por exemplo, LINUX / UNIX). Eu executei o seguinte: …

9 text-processing  grep  find  cp 

Considere os seguintes arquivos: file1: boo,8,1024 foo,7,2048 file2: foo,0,24,154 noo,0,10,561 file3: 24,154,7,1024,0 O que eu preciso é ir para o Arquivo1 e verificar se $2==7; se for verdade, tomar $1, $2e $3de File1 ; agora eu tenho que comparar se $1de File1 igual a $1de File2 ; se for verdade, …

9 text-processing  awk  gawk 

Eu tenho dois corpora paralelos alinhados por sentenças (arquivos de texto) com cerca de 50 mil palavras. (do Europarl corpus -> tradução paralela de documentos legais). Agora eu gostaria de embaralhar as linhas dos dois arquivos, mas ambos da mesma maneira. Eu queria abordar isso usando gshuf (estou em um …

9 text-processing  osx  random 

Eu tenho o seguinte quadro de dados que continua indefinidamente na horizontal e na vertical, com números negativos apenas nas colunas ímpares: -1 2 3 4 -5 9 2 3 -4 5 -6 11 E eu quero a 2ª, 4ª e 6ª colunas completas (ou todas as colunas pares) e …

9 text-processing  sed  awk