O cientista-chefe da OpenAI acabou de emitir um alerta...
Cientista-chefe da OpenAI lança alerta sobre riscos iminentes da IA, exigindo vigilância imediata da comunidade científica.
Conteudo
TLDR;
O alerta do cientista-chefe Jakub Pachocki é sobre a chegada iminente da melhoria recursiva a si mesma da IA, onde os modelos começarão a se aprimorar de forma autônoma. A RSR, ou melhoria recursiva a si mesma, é a capacidade dos modelos de IA de continuarem se aprimorando automática e autonomamente, com a pesquisa de capacidades avançando mais rápido que a de alinhamento. A OpenAI espera ter um pesquisador de IA automatizado completo até março de 2028, conforme métricas internas que mostram agentes de IA já superando a produtividade humana em experimentos.
Resumo
O conteúdo discute as recentes publicações da OpenAI e do cientista-chefe Jakub Pachocki, destacando a chegada iminente da Melhoria Recursiva a Si Mesma (RSI), em que modelos de IA passam a se aprimorar de forma autônoma e acelerada. O texto ressalta que a pesquisa de capacidades está avançando mais rápido que a de alinhamento, criando um cenário em que o controle sobre esses sistemas torna-se cada vez mais difícil. Jakub menciona o projeto Q* e o modelo o1 como marcos iniciais dessa trajetória, que agora evolui para agentes de IA capazes de realizar mais trabalho que pesquisadores humanos. A OpenAI projeta ter um pesquisador de IA totalmente autônomo até março de 2028, o que aceleraria ainda mais o progresso. O artigo “Uma Mente Alienígena” alerta para a necessidade de extrema cautela, pois essas inteligências são cultivadas por meio de otimização em larga escala, resultando em sistemas complexos e opacos, semelhantes a mentes alienígenas. O texto também traça paralelos com a neurociência e enfatiza que o aumento de computação continua sendo o principal motor dessa transformação, aproximando a humanidade de um ponto em que máquinas superarão significativamente a inteligência humana.