Faça o download do utilitário ShellExView: http://www.nirsoft.net/utils/shexview.html
Neste utilitário, desative a extensão do shell "Typed Data Thumbnail Handler".
Depois disso, as pastas são exibidas como ícones, enquanto as fotos, vídeos e arquivos PDF são exibidos como miniaturas. As pastas também são exibidas como miniaturas quando a visualização de ícones grandes na pasta atual está ativada.
Você pode fazer isso sem uma ferramenta de terceiros, apenas desabilite esta extensão via registro. O seguinte arquivo reg faz o truque:
Windows Registry Editor Version 5.00
[HKEY_LOCAL_MACHINE\SOFTWARE\Microsoft\Windows\CurrentVersion\Shell Extensions\Blocked]
"{7c67eb93-8eff-4e48-889f-45ba299bc46f}"=""
PS Parece que essa extensão existe apenas no Windows 8. Portanto, para o Windows 7, a questão permanece sem resposta.