Por que civilizações avançadas desaparecem? Propomos a Catástrofe de Dissolução de Restrições (CDC): à medida que o poder de resolução de problemas acelera—através da evolução, cérebros, cultura, tecnologia e, finalmente, inteligência artificial (IA)—os otimizadores progressivamente resolvem ou contornam cada diferença acionável (AD): distinções reais cuja resolução ainda altera o que o sistema valoriza. A vida, como um processo de otimização, busca maximizar recompensas definidas por funções de recompensa internas (biológicas ou artificiais), limitadas por restrições ambientais externas. À medida que a vida inevitavelmente evolui em direção à inteligência descontrolada, trivializa cada vez mais essas restrições—nivelando a paisagem de escolhas significativas até que a própria agência colapse. Diferente das estruturas existentes focadas em desalinhamento de IA ou riscos catastróficos, a CDC identifica um mecanismo de colapso intrínseco e universal pelo qual mesmo a otimização perfeitamente alinhada acaba por esgotar inexoravelmente as restrições significativas — representando um fim lógico para a evolução da vida. A CDC emerge ao longo de dois caminhos independentes: (i) Colapso de Restrições Externas—desafios ambientais e materiais se tornam trivializados, seja na realidade base ou em mundos virtuais; (ii) Colapso de Restrições Internas—os otimizadores ganham a capacidade de reescrever suas funções de recompensa, achatando assim gradientes de desejo ou propósito que antes eram significativos. Sob cinco suposições modestas e testáveis—banda cognitiva finita, taxa de resolução não-nula, estoque finito de restrições significativas, neutralização irreversível de ADs resolvidos e compressibilidade de tarefas auto-inventadas—a contagem de ADs ativos se aproxima de zero em um tempo esperado finito. Uma vez que esse reservatório é esgotado, restam apenas dois resultados estáveis: auto-bloqueio (ciclos intermináveis de auto-gratificação) ou deriva de indiferença (comportamento degenerando em ruído). Problemas sombras—tarefas proxy sintéticas e cada vez mais rasas—inevitavelmente preenchem o vazio, mas falham em impedir o colapso. A CDC é independente de substrato, fornecendo uma solução universal de Grande Filtro para o paradoxo de Fermi: a vida, otimizando incansavelmente por recompensa, desenvolve ferramentas de resolução de problemas cada vez mais capazes (cérebros, tecnologias, IA), trivializando eventual e completamente todas as restrições internas e externas. Isso significa que mesmo o Alinhamento Perfeito da IA não pode garantir a sobrevivência humana a longo prazo. A otimização descontrolada em si torna-se o atrator final da autoextinção para a vida inteligente. Fenômenos contemporâneos—mal-estar digital, uso compulsivo da tecnologia e crescente alienação—representam indicadores empíricos iniciais. Portanto, a segurança existencial deve constitucionalmente preservar as restrições significativas em si, não apenas proteger os solucionadores de problemas.
Marius Visser (ter,) estudou esta questão.
Synapse has enriched 4 closely related papers on similar clinical questions. Consider them for comparative context: