Enfrentei situação semelhante com três monitores. Estou usando o Windows 8.1. Meu laptop tinha brilho devido às condições de iluminação no meu local de trabalho, então eu queria mudar para duas telas adicionais.
Não apenas eu queria alterar a ordem dos monitores, mas também o principal dispositivo de exibição.
Assim, além da opção de arrastar e soltar, há também uma opção para definir a 'tela principal'. A vantagem é que ele permite alternar a exibição principal do seu laptop para monitores externos.
Tudo o que você precisa fazer é configurar os monitores na sequência necessária. Clique no monitor que você deseja definir como sua tela principal e selecione a opção: 'Tornar esta minha tela principal'
Monitor externo definido como primário
Para mim, depois de fazer essa alteração, não precisei refazer novamente; mesmo quando o laptop foi retirado. Isso torna as coisas um pouco mais fáceis.