Perguntas com a marcação «unicode»

Vou perguntar o que provavelmente é uma pergunta bastante controversa: "Uma das codificações mais populares, UTF-16, deve ser considerada prejudicial?" Por que faço essa pergunta? Quantos programadores estão cientes do fato de que o UTF-16 é realmente uma codificação de comprimento variável? Com isso, quero dizer que existem pontos de …

432 unicode 

No caso de uma invasão alienígena e fomos forçados a suportar seus idiomas em todos os nossos sistemas de computadores existentes, o UTF-8 foi projetado de maneira a permitir sua quantidade possivelmente vasta de caracteres? (Obviamente, não sabemos se os alienígenas realmente têm idiomas, se ou como eles se comunicam, …

86 unicode  utf-8 

Recentemente, tentei implementar um algoritmo de classificação, AllegSkill, no Python 3. Aqui está a aparência da matemática: Não mesmo. Isto é o que eu escrevi: t = (µw-µl)/c # those are used in e = ε/c # multiple places. σw_new = (σw**2 * (1 - (σw**2)/(c**2)*Wwin(t, e)) + γ**2)**.5 Na …

82 naming  unicode 

Eu pensei que o Unicode foi projetado para contornar todo o problema de ter muitas codificações diferentes devido a um pequeno espaço de endereço (8 bits) na maioria das tentativas anteriores (ASCII, etc.). Por que, então, existem tantas codificações Unicode? Até várias versões do (essencialmente) o mesmo, como UTF-8, UTF-16, …

41 unicode  text-encoding 

Nosso software de linha de negócios permite ao usuário salvar determinados dados como CSV . Como existem muitos formatos diferentes (todos chamados de "CSV") em uso, procuramos decidir como deve ser o "formato padrão". Em relação aos separadores de linha / campo e escape, existe um padrão que podemos usar: …

37 standards  unicode  csv  file-formats 

Os Termos de Uso Unicode afirmam que qualquer software que use seus arquivos de dados (ou uma modificação deles) deve conter as referências de licença Unicode. Parece-me que a maioria das bibliotecas Unicode possui funções para verificar se um caractere é um dígito, uma letra, um símbolo etc., e portanto …

35 unicode  licensing 

Estou aprendendo T-SQL. Dos exemplos que eu vi, para inserir texto em uma varchar()célula, eu posso escrever apenas a string a ser inserida, mas para nvarchar()células, todo exemplo prefixa as strings com a letra N. Eu tentei a seguinte consulta em uma tabela que possui nvarchar()linhas e funciona bem, portanto …

34 sql  sql-server  character-encoding  unicode 

Uma mina de estimação está olhando para tantos projetos de software que possuem montanhas de código para suporte a conjuntos de caracteres. Não me interpretem mal, sou a favor da compatibilidade e fico feliz que os editores de texto permitam abrir e salvar arquivos em vários conjuntos de caracteres. O …

31 unicode  utf-8  character-encoding 

Eu imagino que o motivo foi rápido, como o acesso ao caractere no índice, mas alguns caracteres não se encaixam em 16 bits, por isso não funcionaria ... Portanto, se você precisa lidar com casos especiais, por que não usar UTF-8?

29 java  strings  unicode 

No trabalho, encontro muitos arquivos de texto em japonês no Shift-JIS e outras codificações. Causa muitos problemas de mojibake (caracteres ilegíveis) para todos os usuários de computador. O Unicode pretendia resolver esse tipo de problema, definindo um único conjunto de caracteres para todos os idiomas, e a serialização UTF-8 é …

24 legacy  unicode  character-encoding 

Unicode tem talvez 50 espaços \ u0009 \ u000A- \ u000D \ u0020 \ u0085 \ u00A0 \ u1680 \ u180E \ u2000- \ u200A \ u2028 \ u2029 \ u202F \ u205F \ u3000] [\ u0009 \ u000A- \ u000D \ u0020 \ u0085 \ u0085 \ u00A \ …

19 unicode 

Todo mundo sabe que o PHP tem problemas com o Unicode. A versão 6 é efetivamente abandonada, devido a dificuldades de implementação do Unicode. Mas me pergunto se alguém sabe quais são as razões exatas . Problemas de arquitetura / design, problemas de desempenho, problemas da comunidade (aposto que não), …

18 php  open-source  architecture  language-design  unicode 

Eu estava assistindo a apresentação de Jon Skeet (com Tony the Pony) da Dev-Days. Embora "escrever uma função de reversão de cadeia de caracteres" esteja codificando a entrevista 101 - não tenho certeza de que seja realmente possível escrever uma função geral de reversão de cadeia de caracteres, certamente não …

16 algorithms  strings  unicode  localization 

O UTF-16 tem largura fixa ou largura variável? Obtive resultados diferentes de diferentes fontes: De http://www.tbray.org/ongoing/When/200x/2003/04/26/UTF : O UTF-16 armazena caracteres Unicode em pedaços de dezesseis bits. De http://en.wikipedia.org/wiki/UTF-16/UCS-2 : UTF-16 (formato de transformação Unicode de 16 bits) é uma codificação de caracteres para Unicode capaz de codificar 1.112.064 [1] …

16 unicode  character-encoding  utf-8 

Estou projetando um formato de arquivo e quero fazê-lo corretamente. Por ser um formato binário, o primeiro byte (ou bytes) do arquivo não deve formar caracteres textuais válidos (como no cabeçalho do arquivo PNG 1 ). Isso permite que as ferramentas que não reconhecem o formato ainda vejam que não …

14 unicode