Você deve usar yoursite.make para baixar o módulo Drupal e o compositer.json para compositor.
Existe o módulo Composer que integra o Composer ao Drush.
Espero que em breve o .make desapareça, substituído pelo compositor.json; para que isso se torne realidade, alguns problemas precisam ser resolvidos, como o número da versão.
Pacotes do compositor são armazenados no repositório git; você não pode usar um pacote de compositor, mas pode fazer o download do código. Por exemplo, para https://packagist.org/packages/symfony/symfony, você pode usar o seguinte.
libraries[symfony][download][type] = "git"
libraries[symfony][download][url] = " https://github.com/symfony/symfony.git"
libraries[symfony][destination] = "lib/symfony/"
O compositor pode criar coisas recursivamente; claro, isso não vai funcionar aqui.
Consulte: http://cgit.drupalcode.org/drush/plain/docs/make.txt
Eles também são https://github.com/composer/installers que podem fazer o invert (instale o módulo drupal com o compositor).