Todas as coisas que você mencionou, como balanceamento de carga, monitoramento e escalonamento automático, são definitivamente vantagens.
No entanto, você tem que pensar sobre isso da seguinte maneira: em uma verdadeira Plataforma como Serviço (PAAS), o objetivo é separar o aplicativo da plataforma. Como desenvolvedor, você só se preocupa com seu aplicativo. A plataforma é "alugada" para você. As "instâncias" da plataforma são automaticamente atualizadas, administradas, dimensionadas, balanceadas, etc. para você. Você acabou de fazer upload de seu arquivo WAR e ele simplesmente funciona (pelo menos teoricamente).
EC2 por si só não é PAAS. É mais parecido com IAAS ( Infrastructure as a Service ). Você ainda precisa cuidar das instâncias do servidor, instalar software nelas, mantê-las atualizadas, etc.
Elastic Beanstalk é um sistema PAAS. Assim como o App Engine e o Azure, entre muitos outros.
Em um verdadeiro sistema PAAS, o DBMS é um componente separado do (s) servidor (es) de aplicativos da web. O motivo é óbvio: o DBMS não pode ser instalado nas instâncias que estão sendo usadas para o servidor de aplicativos porque, à medida que as instâncias são criadas e destruídas com base em seu tráfego, o DBMS seria perdido! Ter o DBMS e o servidor de aplicativos na mesma máquina / instância geralmente não é uma boa ideia.
Em um sistema PAAS, o DBMS é um serviço separado. Para a Amazon, seria Amazon RDS . Assim como no Elastic Beanstalk, onde você não precisa se preocupar com o servidor de aplicativos e apenas carrega seu arquivo WAR, com RDS, você não precisa se preocupar com o DBMS e apenas implanta seu (s) banco (s) de dados.
Elastic Beanstalk e RDS funcionam muito bem juntos, especialmente quando implementados na mesma zona de disponibilidade, onde a latência seria muito baixa.
Por fim, o uso do Elastic Beanstalk não custa nada mais do que os recursos implantados (instâncias do EC2 e o balanceador de carga). No entanto, o RDS não é barato e definitivamente seria mais caro do que usar uma única instância do EC2 para o servidor de aplicativos e o DBMS.