Usar a fórmula pitagórica em posições dadas em latitude e longitude faz tão pouco sentido quanto, digamos, calcular a área de um círculo usando a fórmula de um quadrado: embora produza um número, não há razão para supor que deva funcionar.
Embora em pequenas escalas qualquer superfície lisa pareça um plano, a precisão da fórmula pitagórica depende das coordenadas utilizadas. Quando essas coordenadas são latitude e longitude em uma esfera (ou elipsóide), podemos esperar que
As distâncias ao longo das linhas de longitude serão razoavelmente precisas.
As distâncias ao longo do Equador serão razoavelmente precisas.
Todas as outras distâncias serão errôneas, em proporção aproximada às diferenças de latitude e longitude.
O erro depende do ponto inicial e final dos cálculos de distância. No entanto, como a esfera e o elipsóide têm uma simetria circular em torno do eixo, o erro depende apenas da diferença das longitudes; portanto, para estudar esse erro, é melhor considerarmos o ponto de origem do Meridiano de Greenwich. Como a esfera e o elipsóide são simétricos sob uma reflexão norte-sul, precisamos apenas estudar pontos de origem no hemisfério sul. Para qualquer um desses pontos, podemos desenhar um mapa de contorno do erro relativo, igual a [Cálculo de Pitágoras] / [Distância verdadeira].
A fórmula pitagórica, usando o raio médio da terra, é
Pythagorean distance = 6371000. * Sqrt[dx^2 + dy^2]] * pi / 180 meters
onde dx é a diferença de longitudes e dy é a diferença de latitudes, ambas em graus. (A diferença nos valores de longitude é reduzida no módulo 360 para fornecer o valor correto de dx ao cruzar o antimeridiano; não fazer isso introduziria erros artificialmente grandes que não nos dizem nada sobre a própria fórmula de Pitágoras.)
Os gráficos a seguir mostram o erro relativo comparado à distância correta no elipsóide WGS 84 para latitudes de -70 a 0 em incrementos de 10 graus. A coordenada horizontal é a diferença de longitudes e a coordenada vertical é a latitude do destino. As regiões claras têm um erro relativamente pequeno: as linhas de contorno estão em 1, 1.01, 1.02, 1.05, 1.1, 1.2, 1.5, 2 etc. (As áreas brancas puras nos cantos são locais onde o erro ultrapassa a faixa desses contornos .) Os pontos vermelhos mostram o ponto de origem.
As faixas brancas verticais atestam a exatidão das expectativas (1): As distâncias pitagóricas são precisas quando há uma pequena diferença nas longitudes. As faixas brancas horizontais em baixas latitudes confirmam a expectativa (2): próximo ao Equador, as distâncias horizontais são razoavelmente precisas. Caso contrário, como testemunhado pelas extensas regiões mais escuras, em todas as outras distâncias a fórmula pitagórica é ruim.
Podemos fazer estimativas quantitativas do máximoerro obtido para pares de pontos próximos (a, digamos, algumas centenas de quilômetros um do outro). A escala - usando um valor apropriado para o raio - é verdadeira ao longo do meridiano, mas ao longo de um círculo de latitude, ela erra aproximadamente pela secante da latitude. Por exemplo, a uma latitude de 40 graus, a secante é 1,31, o que implica que a fórmula pitagórica fornecerá distâncias cerca de 31% grandes demais na direção leste-oeste. (Isso é evidente no gráfico de contorno superior direito, para um ponto de origem a -40 graus de latitude, onde a região imediatamente leste-oeste do ponto vermelho fica entre os contornos 1,2 e 1,5.) Distâncias curtas em todas as outras direções serão muito grande em alguma quantidade entre 0% e 31%; distâncias maiores podem errar ainda mais (como mostram os gráficos de contorno).