Boa pergunta.
Antes de mais nada, em Go deepmind não havia oponentes sobre-humanos para desafiar. Os motores Go não estavam nem perto do nível mais alto dos principais jogadores humanos. No xadrez, no entanto, os motores são 500 pontos ELO mais fortes que os principais jogadores humanos. Esta é uma diferença enorme. A quantidade de trabalho investido nos motores de xadrez contemporâneos é impressionante. Estamos falando de milhões de horas em programação, centenas de milhares de iterações. É um corpo massivo de conhecimento e trabalho. Superar e superar tudo isso em 4 horas é impressionante.
Em segundo lugar, não é tanto o resultado em si que surpreende os mestres do xadrez, mas a forma como o AlphaZero joga xadrez. É bastante irônico que um sistema que não tinha conhecimento ou experiência humana seja o mais importante. Os motores são famosos por jogar movimentos feios, sem harmonia etc. É difícil explicar para um jogador que não é xadrez, mas existe um "movimento artificial", como os motores contemporâneos costumam fazer. AlphaZero não joga assim. Tem um estilo muito humano, onde domina as peças do oponente com um jogo estratégico profundo e sacrifícios impressionantes de posição. O AlphaZero funciona da maneira que almejamos, combinando profundo entendimento posicional com a precisão do cálculo de motores.
Editar
Oh, e eu esqueci de mencionar algo sobre o resultado em si. Se você não está familiarizado com o xadrez do computador, pode não parecer impressionante, mas é.
Atualmente, as margens de vitória que separam os principais motores contemporâneos são muito finas. Em uma partida de 100 jogos, você pode esperar um resultado como 85 jogos sorteados, 9 vitórias e 6 derrotas para determinar o melhor mecanismo.
O AlphaZero 28 vitórias e 72 empates com zero derrotas foi esmagador de outro mundo e era completamente impensável até o momento em que aconteceu.