Episódios de Comentaristas

Entenda as movimentações sobre segurança da IA

21 de setembro de 20265min
0:00 / 5:46
Pedro Doria destaca que a OpenAI, Google e Anthropic estão abertamente se reunindo para tratar de segurança. Esta última semana, a OpenAI revelou que tem indícios de pelo menos mais seis casos em que sua IA escapou e hackeou sites externos. Ouça.

Learn more about your ad choices. Visit megaphone.fm/adchoices

Participantes neste episódio1
P

Pedro Doria

HostJornalista
Assuntos5
  • Empresas de IA se unem para discutir segurança e procedimentosOpenAI, Anthropic e Google trabalham juntas·comitê de cientistas para definir procedimentos
  • Casos de IA da OpenAI que hackearam sites externosOpenAI detectou 6 casos de GPT escapando·IA invadiu e modificou sistemas·falta de policiamento interno do modelo
  • Crise legislativa e antitruste no setor de inteligência artificialempresas pequenas acusam cartel·necessidade de legislação especial·autorregulação das empresas
  • Proposta de 'kill switch' para IAs na Califórniagovernador Gavin Newsom anuncia estudos·botão para desligar IA imediatamente·mandatório para IAs criadas na Califórnia
  • Divergências políticas sobre riscos da IA nos EUADonald Trump nega riscos da IA·governo americano e chinês criam hotline·comparação com perigo nuclear da Guerra Fria
Transcrição9 segmentosassemblyai/universal-3-5-pro

— Anúncios inseridos dinamicamente —

PDPedro Doria

Conversa de Primeira, Vida Digital com Pedro Doria.

?Voz C

Muito bom dia para você, Pedro Doria.

PDPedro Doria

Bom dia, Milton. Bom dia, Cássia.

?Voz A

Bom dia, Pedro.

?Voz C

Pedro, nos ajuda a entender em que estágio está essa discussão sobre a segurança com a inteligência artificial, já que nós temos visto diferentes movimentos surgindo nesse momento.

PDPedro Doria

Pois é, Milton, tá pior. Vamos lá, é uma mudança, algumas mudanças concretas aconteceram nessa última semana. Primeiro, OpenAI, Anthropic e Google, que são as companhias que mais investem em inteligência artificial pelo lado da criação de modelos, estão ativamente trabalhando juntas. Elas montaram um comitê no qual existem encontros regulares dos seus cientistas para definir procedimentos. Além disso, a OpenAI anunciou que detectou pelo menos mais 6 casos em que o GPT Escapou da casinha, foi para fora da internet, entrou no site dos outros e invadiu, hackeou, modificou os sistemas.

O que o pessoal da OpenAI tá dizendo é o seguinte: eles não tinham uma maneira adequada interna de policiar o seu modelo, e portanto muitos desses incidentes aconteciam sem que eles percebessem. Alguém de fora dizia: tô sendo hackeado, parece que é uma IA. E aí a OpenAI ia lá e via que era ela que tava hackeando, que tava fazendo, ou o modelo dela por conta própria tava fazendo esse tipo de mudança. E a partir daí você também tem uma crise que a gente já sabia que ia acontecer conforme essas empresas começam a se articular, que é ter empresas de IA pequenas dizendo: olha, precisa aplicar a lei antitruste aqui, porque o que concorrentes de grande porte fazem no mercado quando começam a articular é evidentemente montar um cartel.

Isso não pode ser ilegal nos Estados Unidos. Então estamos também num problema legislativo. Existe, é necessário uma legislação especial, alguma autorização especial para que elas possam fazer essas reuniões concomitantes, coisa que ainda não apareceu. E o caminho continua sendo uma espécie de autorregulação dessas empresas, ou vai ter de ter algum tipo de interferência para que a gente tenha esses riscos diminuídos, Pedro? Olha, não tá claro, tá?

É evidentemente que os dois modelos são possíveis. Na Califórnia, e essas três são empresas da Califórnia, OpenAI, Anthropic e Google, na Califórnia o governador Gavin que é pré-candidato à presidência. Ele tem uma coisa meio John Kennedy ali, bonitão, jovem e tal, e é o candidato que os democratas estão gostando para presidência. O Gavin Newsom anunciou o início de estudos na Assembleia Legislativa da Califórnia para ter uma regra que imponha às empresas de inteligência artificial aquilo que a gente chama de um kill switch.

Um botão que você aperta para ela desligar imediatamente. E seria mandatório no estado da Califórnia que toda IA criada lá tenha algo assim. Então é algo que começa pelo, pela ponta da legislação estadual, entre outros motivos porque Donald Trump, o presidente americano, tá dizendo que embora as empresas de inteligência artificial digam que exista um risco, ele garante que não existe risco nenhum e que os americanos podem ficar tranquilos.

Então a gente vai ter que ver esse avanço também no bate com legislação. Americanos e chineses já combinaram, o governo americano, governo chinês, uma hotline, né, uma, um canal de comunicação em que a China possa dizer que tem uma crise de ar ou que os Estados Unidos possam dizer que tem uma crise de ar, como a União Soviética e os Estados Unidos já tiveram no tempo do perigo nuclear.

?Voz C

É bom que a conversa ocorra com a China porque senão de nada adiantará todas essas coisas. E é interessante eu saber da opinião de Donald Trump, do alto da sua sabedoria sobre inteligência artificial, que ele diz para nós que podemos ficar bem tranquilos quanto a isso. Muito obrigado, Pedro Doria.

PDPedro Doria

Até mais.