Caractere '^ M' no final das linhas

Quando executo um script SQL específico em ambientes Unix, vejo um caractere '^ M' no final de cada linha do script SQL, conforme ele é ecoado na linha de comando. Não sei em qual sistema operacional o script SQL foi criado originalmente.

O que está causando isso e como faço para corrigir isso?

É causado pelos caracteres de finalização de linha do DOS / Windows. Como Andy Whitfield disse, o comando Unix dos2unix ajudará a resolver o problema. Se você quiser mais informações, pode ler as páginas de manual desse comando.

Corrija os finais de linha viexecutando o seguinte:

:set fileformat=unix

:w

A causa é a diferença entre como um sistema operacional baseado em Windows e um sistema operacional baseado em Unix armazenam os marcadores de fim de linha.

Os sistemas operacionais baseados em Windows, graças à sua herança DOS, armazenam um fim de linha como um par de caracteres - 0x0D0A(retorno de carro + alimentação de linha). Sistemas operacionais baseados em Unix apenas usam 0x0A(um feed de linha ). O que ^Mvocê está vendo é uma representação visual de 0x0D(um retorno de carro ).

dos2unix vai ajudar com isso. Você provavelmente também precisa ajustar a fonte dos scripts para ser 'amigável ao Unix'.

A maneira mais fácil é usar vi. Eu sei que parece terrível, mas é simples e já está instalado na maioria dos ambientes UNIX. O ^ M é uma nova linha do ambiente Windows / DOS.

no prompt de comando: $ vi filename

Em seguida, pressione " :" para entrar no modo de comando.

Pesquisar e substituir tudo globalmente é :%s/^M//g" Pressione e segure o controle, pressione V e, em seguida, M " que substituirá ^ M por nada.

Então, para escrever e sair, digite " :wq" Feito!

Tente usar o dos2unix para retirar o ^ M.

No vi, faça um :%s/^M//g

Para obter o ^Mporão da CTRLtecla, pressione Ventão M(ambos enquanto segura a tecla Control) eo ^Maparecerá. Isso localizará todas as ocorrências e as substituirá por nada.

O script SQL foi originalmente criado em um sistema operacional Windows. Os caracteres '^ M' são o resultado do Windows e do Unix terem idéias diferentes sobre o que usar para um caractere de fim de linha. Você pode usar perl na linha de comando para corrigir isso.

perl -pie 's/\r//g' filename.txt

O ^ M é normalmente causado pelas novas linhas do operador do Windows e traduzido para o Unix parece um ^ M. O comando dos2unix deve removê-los bem

dos2unix [opções] [-c convmode] [-o arquivo ...] [-n arquivo de saída infile ...]

C:\tmp\text>dos2unix hello.txt helloUNIX.txt

O Sed está ainda mais disponível e pode fazer esse tipo de coisa também se o dos2unix não estiver instalado

C:\tmp\text>sed s/\r// hello.txt > helloUNIX.txt  

Você também pode tentar tr:

cat hello.txt | tr -d \r > helloUNIX2.txt  

Aqui estão os resultados:

C:\tmp\text>dumphex hello.txt  
00000000h: 48 61 68 61 0D 0A 68 61 68 61 0D 0A 68 61 68 61 Haha..haha..haha  
00000010h: 0D 0A 0D 0A 68 61 68 61 0D 0A                   ....haha..  

C:\tmp\text>dumphex helloUNIX.txt  
00000000h: 48 61 68 61 0A 68 61 68 61 0A 68 61 68 61 0A 0A Haha.haha.haha..  
00000010h: 68 61 68 61 0A                                  haha.  

C:\tmp\text>dumphex helloUNIX2.txt  
00000000h: 48 61 68 61 0A 68 61 68 61 0A 68 61 68 61 0A 0A Haha.haha.haha..  
00000010h: 68 61 68 61 0A                                  haha.  

Para substituir os caracteres ^ M no editor vi, use abaixo

abra o arquivo de texto, diga t1.txt

vi t1.txt

Entre no modo de comando pressionando shift + :

em seguida, pressione as teclas conforme mencionado %s/^M/\r/g

in above ^M is not (shift + 6)M instead it is (ctrl + V)(ctrl + M)

Uma alternativa ao dos2unixcomando seria usar utilitários padrão como sed.

Por exemplo, dos para unix:

sed 's/\r$//' dos.txt > unix.txt

unix para fazer:

sed 's/$/\r/' unix.txt > dos.txt

Você pode remover ^ M dos arquivos diretamente por meio do comando sed, por exemplo:

sed -i'.bak' s/\r//g *.*

Se você estiver satisfeito com as mudanças, remova os arquivos .bak:

rm -v *.bak

Converter finais de linha DOS / Windows (\ r \ n) em finais de linha Unix (\ n), com tr:

tr '\r\n' '\n' < dosFile.txt > unixFile.txt

Postagem sobre a substituição de novas linhas da linha de comando do Unix

od -a $file é útil para explorar esses tipos de pergunta no Linux (semelhante ao dumphex acima).

Em Perl, se você não quiser definir a variável $ / e usar chomp (), você também pode fazer:

$var =~ /\r\n//g;

Meus dois centavos

Outro comando vi que fará: :%s/.$// Isso remove o último caractere de cada linha no arquivo. A desvantagem desse comando de pesquisa e substituição é que ele não se importa com o último caractere, portanto, tome cuidado para não chamá-lo duas vezes.