Parece que o novo remetente para computador disponível em https://photos.google.com/apps faz o que você espera.
Originalmente, pensei que era o mesmo aplicativo que o backup de Fotos do Google+, mas parece ser uma atualização. Há muitas fotos para serem exibidas, mas estou começando a ver novos álbuns que correspondem aos nomes das minhas pastas.
Se você usar o Picasa e o recurso "Sincronizar com a Web" em uma pasta, um álbum será realmente criado usando o nome da pasta. (Eu já fiz isso por três ou quatro e parece que aguenta.)
Pode demorar um pouco para que todas as fotos sejam carregadas, e o Picasa ainda não foi atualizado para o novo Google Fotos, portanto, ele deve depender da sincronização configurada entre o Google+ Fotos e o Google Fotos.
Tentei vários métodos diferentes de organizar as fotos no Google Drive, mas ele simplesmente não criaria um álbum automaticamente (embora as imagens estejam lá).
A alternativa é arrastar e soltar uma pasta na página principal do Google Fotos. O conteúdo da pasta será carregado e você será perguntado se deseja criar um álbum e, se houver, o nome. (Isso pode ser uma coisa do Google Chrome.)