Eu diria que o roteador não está à altura do trabalho e quase certamente está ficando sem recursos.
Eu recomendo obter um roteador melhor. Você não precisa realmente substituir o roteador da Internet. Basta pegar um extensor de WiFi. Dê uma olhada no Edimax, eles têm várias caixas que fariam o trabalho sem custar muito.
Com um extensor WiFi, você também pode definir várias caixas na mesma rede WiFi com bastante facilidade para que as caixas possam compartilhar a carga. Simples, certifique-se de que cada caixa recebe um endereço IP fixo na mesma sub-rede que o roteador principal da Internet e verifique se as configurações de Wi-Fi para cada uma são as mesmas (o SSID, canal e configurações de segurança).