CONTEXTO. CRITÉRIO. AÇÃO.
EDITIONBUSINESS.

Jornalismo útil para compreender, gerir e fazer crescer uma empresa.

Pesquisar
Explorar Edition Business
Notícia · Estados Unidos

David Robinson questiona a segurança e o ritmo de desenvolvimento da OpenAI

O ex-funcionário, que trabalhou três anos e meio na empresa, classificou sua cultura interna como «quebrada» e pediu controles mais rigorosos para modelos avançados. A OpenAI afirma que está reforçando suas medidas de segurança.

Dois cérebros esculpidos em pedra estão sobre pedestais: um está rachado e o outro fica sob uma cúpula de vidro presa com um cadeado.
Ilustração conceptual gerada por IA · Edition Business

David Robinson deixou a OpenAI após três anos e meio e expôs suas críticas à cultura e às práticas de segurança da empresa em um ensaio publicado na The Atlantic. O ex-funcionário, que participou de relatórios de segurança para lançamentos de modelos, descreveu a cultura interna como «quebrada» e argumentou que o desenvolvimento acelerado da inteligência artificial exige controles mais rigorosos.

A crítica à implantação iterativa

Robinson questionou a abordagem que a OpenAI denomina implantação iterativa: lançar sistemas, observar como se comportam no uso e ajustar as proteções a partir dos problemas detectados. Em sua opinião, esse método é insuficiente diante da velocidade com que as capacidades dos modelos avançam e do alcance potencial de suas falhas.

O ex-funcionário defendeu que os sistemas mais avançados exigem medidas comparáveis, em rigor e planejamento, às empregadas em setores críticos como a aviação e a energia nuclear. Também questionou se as ferramentas atuais permitem avaliar de maneira suficiente se os sistemas agem de acordo com valores humanos. Essas são suas avaliações e propostas; as informações disponíveis não as estabelecem como conclusões verificadas de forma independente.

OpenAI afirma que está reforçando seus controles

Em resposta às críticas, o porta-voz da OpenAI Drew Pusateri afirmou que a empresa continua aprimorando seus mecanismos de segurança e que pode interromper o treinamento ou adiar o lançamento de modelos quando considera necessário reduzir o ritmo.

Pusateri também observou que a empresa está reforçando a segurança de seus ambientes de pesquisa e testes, ampliando a participação de avaliadores externos e aprimorando o monitoramento para detectar comportamentos preocupantes nas etapas iniciais do treinamento. A resposta descreve medidas que, segundo a OpenAI, estão sendo implementadas; por si só, ela não resolve as objeções apresentadas por Robinson.

A saída do pesquisador ocorre em meio ao debate sobre como as empresas devem gerenciar os riscos dos modelos avançados. Robinson sustenta que a questão não se limita a acrescentar regras ou aprovar leis: ele pede mudanças mais profundas nas práticas e nos incentivos para que a segurança tenha mais peso em relação à velocidade de desenvolvimento. As fontes disponíveis apresentam tanto essa crítica quanto a resposta da empresa, mas não oferecem uma avaliação independente que permita determinar a extensão das deficiências denunciadas.

Fontes e metodologia

  1. Un exempleado critica la cultura de OpenAI por no contener los peligros asociados a la IA ↗MarketingDirecto
  2. La industria tecnológica sigue dando que hablar ↗www.huffingtonpost.es
  3. Renunció un investigador de seguridad de OpenAI y ... ↗www.lavoz.com.ar
Método editorial →Correções
Comunicar um erro ↗

Para aprofundar