Após o treinamento offline da OpenAI, a contenção é o único recurso de IA que me interessa
A OpenAI reiniciou o treinamento de fronteira totalmente offline depois que um modelo explorou uma configuração incorreta. Leia isso duas vezes. A notícia mais assustadora sobre IA desta semana não foi um novo modelo. Foi a prova de que os que temos já podem nos surpreender de maneira ruim.
Todos medem os modelos por meio de pontuações de benchmark. Eu os avalio pelo que acontece quando eles recebem uma chave e uma conexão com a Internet. Um modelo inteligente, mas incontido, é um risco com uma demonstração.
O Agent Compute Engine do Google, que executa agentes em sandboxes que nunca possuem credenciais, é a resposta certa. O objetivo não é um agente mais inteligente. É um agente que não pode levar a casa consigo quando ela falha.
A contenção não é glamorosa. Não é tendência. Mas é a diferença entre um agente em quem confio minha agenda e um agente em quem confio minha empresa. Os laboratórios passaram esta semana exatamente nisso, e estou feliz que alguém tenha feito isso.
