Se você estiver fazendo chá quente, não deve ter problemas. Lembre-se de que, para pasteurizar, você só precisa aumentar a temperatura do núcleo até 155 graus Fahrenheit e manter por alguns minutos (alguns segundos no caso de pasteurização instantânea). Supondo que você mergulhe seu chá na água em ponto de ebulição (ou deixe as folhas de chá assentarem na bebida), você deve exceder em muito a quantidade de tempo necessária para matar completamente qualquer sujeira.
Nesse ponto, a única preocupação é que, se os desagradáveis tiverem a chance de começar a crescer entre os usos, eles possam produzir produtos químicos perigosos. Isso é comum em alguns bolores e fungos. Se você colocar as folhas usadas na geladeira após o uso e mantê-las lá, isso não deve ser um problema (as temperaturas frias matam ou retardam muito a capacidade das bactérias de realizar seus negócios metabólicos). Eu não usaria as mesmas folhas todos os dias por uma semana, mas não consigo pensar em uma razão legítima para que um item que está sendo danificado quase esterilizado toda vez que está sendo usado, ou pelo menos pasteurizado, seja perigoso.
Agora, o gosto é outra história. Isso pode ficar desagradável. Mas ei, o sabor desagradável de uma pessoa é o gourmet da próxima pessoa, então experimente.