Vou ter uma opinião um pouco diferente sobre isso.
Meu texto principal geralmente é definido em 12 pontos e talvez eu descer para 10 para notas de rodapé, mas isso nem sempre é necessário. Você tem outros "efeitos" à sua disposição para fazer com que as notas de rodapé não atrapalhem / confundam / sejam irritantes / pareçam dominantes demais.
Se o seu texto principal estiver definido em 11, 10 ou 9, eu não diminuiria o tamanho das notas de rodapé . 8 como texto principal, na minha opinião, está indo longe demais.
Variar tamanhos demais em um documento geralmente é mais perturbador do que usar uma escala de cinza suave para diferenciar o conteúdo. (Ao diminuir o tamanho, nunca use menos de 2 pontos).
Eu uso uma linha horisontal cinza e texto cinza. Aqui está um exemplo de descer 2pt. Clique nele para vê-lo corretamente:

E aqui está um exemplo de adesão ao 12pt:
