Da minha própria experiência, movendo-me seis vezes quando criança, e conversando com outras pessoas sobre as mudanças na infância, diria que quanto mais cedo você se mudar, melhor. Socialmente, em geral, outras crianças aceitam menos as pessoas de fora quanto mais velhas ficam. Isto é especialmente verdade se você estiver se mudando para algum lugar com uma cultura ou sotaque visivelmente diferente. Minha esposa se mudou do Texas para o Arizona no ensino médio e, às vezes, ainda fica chateada com as crianças que zombavam dela.
Além disso, as diferenças nos padrões educacionais e nos currículos são maiores quanto mais você está na escola; portanto, quanto mais tarde você se muda, menos fundamento comum você tem com as outras crianças. Por exemplo, eu era um estudante A + na literatura inglesa, mas, infelizmente, quando mudei o ensino médio, meus novos colegas de classe leram uma seleção quase completamente diferente de livros. Esse não foi um problema fatal, mas tornou as coisas mais difíceis porque eu não tinha esse quadro de referência comum. Minha trigonometria é um pouco fraca até hoje, porque minhas escolas secundárias a ensinaram em diferentes ordens.
Também acho que tenho menos memórias de infância do que meus colegas que nunca se mudaram durante a infância, e os que tenho são frequentemente mais confusos. Atribuo isso à falta de "âncoras" para refrescar minha memória. Por exemplo, toda vez que você dirige por um parque, lembra-se de eventos que ocorreram lá, mas se você nunca passar por ele em 10 anos, essas memórias serão deixadas de lado.