Você não apenas tem preocupações válidas, mas a situação obriga os bons pais a gerenciá-la adequadamente. No entanto, você está fora da base em um ponto que eu mencionarei abaixo.
Primeiro, o que deve ser óbvio: você não pode, e não deve, tentar ditar os termos da vida de sua ex-esposa. Não apenas porque é inútil e errado, mas porque quase certamente tornaria as coisas piores.
Mantenha boas linhas de comunicação com seu ex. Trate-a como uma boa amiga e tenha consideração por sua vida e sentimentos. Isto é um investimento. Isso beneficiará seu filho de várias maneiras ao longo do tempo. Específico à sua pergunta, fica mais fácil entender como a situação está se desenrolando.
Preste muita atenção em como ela está reagindo ao meio ambiente, em como a personalidade dela evolui e em qualquer mudança de comportamento. Se tudo é benigno, é ótimo que você esteja prestando atenção de qualquer maneira.
Pensamento errado para ser cauteloso com:
Essa porcaria de "dar às pessoas o benefício da dúvida" nos comentários é errada e perigosa. É algo virtuoso fazer a maior parte do tempo, mas quando uma criança pode ser deixada sozinha com um novo adulto, é absolutamente correto errar por precaução. O fato de o cara ser provavelmente inofensivo é irrelevante. Digamos que as chances de ele maltratá-la são de apenas 1 em 10.000. Você simplesmente não pode ignorar o risco quando as apostas são tão altas se houver uma maneira prática de mitigá-lo. Talvez você não possa evitar o risco de dirigir, mas isso é diferente. Descubra o que puder sobre ele e não se sinta mal por um segundo.
[ele é] policial e, portanto, teoricamente é seguro estar perto de crianças
Isso é tão errado que você está me assustando. Sem condenar os policiais, por que você acha que eles são melhores em suas vidas pessoais do que as pessoas comuns? Em segundo lugar, odeio mencionar o pior caso, mas o abuso sexual vem de todas as carreiras respeitáveis, prestigiadas e honradas que você pode imaginar. Novamente, ele provavelmente é um cara legal, mas sem saber ainda, a escolha da carreira de alguém deve lhe dar zero confiança adicional sobre a segurança do seu filho.
Sobre os comentaristas que dizem 'como você se sentiria se alguém desse uma olhada em você': Como deveríamos nos sentir é que não devemos dar a mínima para alguém que se sente desprezado quando alguém nos diz que está tomando precauções de boa fé em relação à segurança da coisa mais importante no planeta. Obviamente, isso deve ser feito com o máximo de consideração e respeito possível. Mas se você está fazendo o certo da maneira certa e sempre sendo educado, nem se preocupe com o que ele pensa.