A singularidade, no contexto da IA, é um evento teórico pelo qual um sistema inteligente com os seguintes critérios é implantado.
- Capaz de melhorar o alcance de sua própria inteligência ou implantar outro sistema com esse alcance aprimorado
- Dispostos ou compelidos a fazê-lo
- Capaz de fazê-lo na ausência de supervisão humana
- A versão aprimorada sustenta os critérios (1) a (3) recursivamente
Por indução, a teoria prevê que uma sequência de eventos será gerada com um potencial aumento da taxa de inteligência que pode exceder amplamente o potencial da evolução do cérebro.
O quão obrigada essa entidade de auto-aperfeiçoamento ou população de entidades procriadas seria preservar a vida humana e a liberdade é indeterminada. A idéia de que essa obrigação possa fazer parte de um contrato de software irrevogável é ingênua à luz da natureza dos recursos vinculados aos critérios (1) a (4) acima. Como em outras tecnologias poderosas, os riscos são tão numerosos e abrangentes quanto os benefícios potenciais.
Os riscos para a humanidade não requerem inteligência. Existem outros contextos para o uso do termo singularidade, mas eles estão fora do escopo deste fórum de IA, mas podem valer uma breve menção por uma questão de clareza. Engenharia genética, engenharia nuclear, globalização e basear uma economia internacional em uma fonte de energia finita sendo consumida milhares de vezes mais rápido do que na Terra - Esses são outros exemplos de tecnologias de alto risco e tendências de massa que apresentam riscos e benefícios para a humanidade.
Voltando à IA, a principal ressalva na teoria da singularidade é sua falha em incorporar a probabilidade. Embora seja possível desenvolver uma entidade que esteja de acordo com os critérios (1) a (4) acima, pode ser improvável o suficiente para que o primeiro evento ocorra muito tempo depois que todos os idiomas atuais falados na Terra estiverem mortos.
No outro extremo da distribuição de probabilidade, pode-se argumentar facilmente que existe uma probabilidade diferente de zero de que o primeiro evento já ocorreu.
Nesse sentido, se uma presença mais inteligente já existisse na Internet, qual seria a probabilidade de encontrar o melhor interesse de se revelar aos seres humanos inferiores. Nós nos apresentamos a uma larva passageira?