Eu li as respostas aqui e elas não eram muito claras. Então, aqui está uma resposta melhor, completa com capturas de tela. Estou ciente de que existem maneiras mais curtas de fazer isso, mas elas são propensas a erros. Esta é a maneira mais simples que sei fazer isso.
Na barra de tarefas, você pode ver o painel de notificações clicando neste botão na barra de tarefas:

O botão de notificações fica branco quando você recebe novas notificações. Como você pode ver, o meu é preto porque cancelei todas as minhas notificações. Quando você clica nele, ele abre esse painel, geralmente no lado direito da tela para mim.

Aqui você pode ver coisas como seu wifi e bluetooth. Clique no botão "Todas as configurações" para acessar a tela de configurações:

As notificações estão nas configurações do sistema, então clique no botão "Sistema".

Aqui você pode gerenciar muitas coisas no seu computador, mas nós nos preocupamos apenas com as notificações. Clique em "Notificações e ações" para acessar a guia "Notificações"

Aqui você pode controlar quais notificações deseja ver. Encontre "Obter o Office" em "Mostrar notificações desses aplicativos" e desative-o.