Quem disse "Você está fazendo errado!" está errado.
"Cardio" é um termo muito amplo e é difícil fazer errado. Você pode treinar na faixa de cardio em diversas intensidades e de várias maneiras. Se o seu objetivo é a perda de gordura, não importa realmente como você se exercita cardio, desde que você esteja queimando mais calorias do que está ingerindo. Se treine com uma intesidade mais baixa que permita que você leia, você terá que ir mais longe para queimar tantas calorias quanto uma sessão de alta intensidade.
Se seu objetivo é desempenho, você deve fazer exercícios cardio que estressem seu sistema cardiovascular enquanto treina a aptidão aeróbia dos músculos específicos do desempenho. Suponho que se possa dizer que, se você está treinando para uma competição de natação e está lendo enquanto treina, provavelmente está fazendo algo errado, porque suas páginas estão ficando molhadas ou você está andando de bicicleta ergométrica que terá apenas efeitos marginais em você capacidade de natação.
Se você está seguindo um programa específico e eles dizem "se você está lendo, está fazendo errado", provavelmente está fazendo errado, por exemplo. não treinando com intensidade suficientemente alta.