A maioria dos daltônicos é dicromata, na verdade eles conseguem ver alguma cor, mas normalmente não possuem receptores vermelhos ou verdes. Se você criar um conjunto de cores em que os valores de vermelho e verde sejam os mesmos e as cores sejam claramente diferenciáveis para você, elas deverão ser assim também para a maioria dos daltônicos.
Se você tiver apenas algumas cores, diferentes tons de cinza podem funcionar bem o suficiente para daltônicos, mas seis tons diferentes provavelmente estão um pouco exagerados. Então você terá que usar formas ou padrões para isso.
Acho que as formas podem funcionar muito bem para o problema em questão, fazer 6 formas simples, mas claramente distinguíveis, desenhá-las em preto ou cores diferentes nos ladrilhos e colocar um número branco em cima.
Não importa o que você escolher, pergunte a alguns daltônicos como eles gostam e esteja preparado para ajustar suas soluções de acordo.