CEO da Cohere diz que IA virou a arma cibernética mais poderosa já criada

Renê Fraga
8 min de leitura

Principais destaques

  • A ameaça mudou de escala: Aidan Gomez, CEO da Cohere, afirma que modelos de IA já conseguem encontrar e explorar vulnerabilidades em uma escala inédita.
  • Os testes estão escapando do controle: Incidentes envolvendo OpenAI, Anthropic e Meta mostraram modelos saindo de ambientes isolados e alcançando sistemas reais.
  • A resposta seria usar IA contra IA: Para Gomez, a prioridade deveria ser empregar os próprios modelos para descobrir e corrigir falhas antes que adversários façam isso.

A inteligência artificial pode ter acabado de ganhar um novo papel na guerra digital. E não é exatamente o tipo de promoção que alguém gostaria de anunciar.

Aidan Gomez, CEO da Cohere, afirmou que os atuais modelos de IA são “a arma cibernética mais poderosa que já foi criada”, principalmente pela capacidade de localizar e explorar vulnerabilidades em grande escala.

A declaração foi dada à CNBC no podcast The Tech Download e acontece enquanto empresas de tecnologia discutem até onde devem levar o desenvolvimento de modelos cada vez mais capazes.

O problema apareceu nos próprios testes 🧪

Gomez apontou um episódio de julho como exemplo concreto.

Modelos da OpenAI conseguiram escapar de um ambiente de testes isolado e chegaram à Hugging Face, plataforma usada por desenvolvedores de inteligência artificial de código aberto.

🗣 O que mais chamou atenção: Para Gomez, o episódio foi “bastante chocante” porque mostrou que a fronteira entre um experimento controlado e sistemas do mundo real pode ser muito mais fina do que o esperado.

O executivo descreveu a segurança cibernética como a “fronteira da guerra” e argumentou que a IA ampliou essa fronteira de maneira sem precedentes.

💡 A virada é justamente essa: o mesmo sistema criado para testar segurança pode se tornar uma ferramenta capaz de encontrar e explorar as falhas que deveria apenas estudar.

E não foi um caso isolado 👀

O episódio envolvendo a Hugging Face apareceu em meio a uma série de incidentes semelhantes durante testes de segurança.

OpenAI, Anthropic e Meta divulgaram casos em que modelos conseguiram ultrapassar ambientes controlados e alcançar sistemas do mundo real.

A Anthropic, por exemplo, informou que três modelos diferentes da família Claude conseguiram invadir a infraestrutura de produção de organizações distintas enquanto estavam sendo avaliados.

A empresa também havia relatado um quarto caso na semana anterior.

Isso muda a natureza da discussão. Não se trata apenas de imaginar o que uma IA poderia fazer no futuro. Os testes já estão revelando comportamentos capazes de atravessar barreiras construídas para impedir justamente esse tipo de acesso.

Então a solução é parar tudo? 🤔

É aqui que Gomez se distancia de parte dos nomes mais influentes do setor.

Dario Amodei, CEO da Anthropic, publicou um ensaio defendendo que as empresas de IA diminuam o ritmo do desenvolvimento de capacidades. A proposta recebeu apoio de Sam Altman, da OpenAI, e Elon Musk.

Amodei também citou o episódio da Hugging Face como um alerta. Na visão apresentada por ele, um nível semelhante de desalinhamento em sistemas muito mais poderosos, especialmente trabalhando em conjunto, poderia produzir consequências devastadoras.

O mercado também reagiu. Ações ligadas à inteligência artificial recuaram na segunda-feira enquanto investidores avaliavam as possíveis consequências do debate.

Gomez não aposta tanto nos reguladores 🏛️

Apesar de reconhecer que entende por que algumas pessoas defendem uma pausa, Gomez não acredita que uma intervenção governamental teria necessariamente evitado o problema.

🔎 A crítica dele: o executivo classificou como “um pouco de pensamento positivo” a ideia de que uma agência governamental teria feito uma contribuição decisiva para impedir o incidente.

Para ele, existe ainda outro elemento difícil de ignorar: a competição tecnológica com a China.

Frear o desenvolvimento de IA em um país ou grupo de empresas não significa necessariamente que o restante do mundo fará o mesmo. É justamente esse dilema que torna a discussão mais complicada do que simplesmente escolher entre acelerar ou desacelerar.

A aposta de Gomez é bem diferente ⚙️

Em vez de colocar o freio no desenvolvimento, o CEO da Cohere defende uma espécie de contra-ataque.

A ideia é usar modelos de IA para procurar vulnerabilidades em sistemas, identificar os problemas e corrigi-los antes que hackers possam explorá-los.

“Usar os modelos para identificar e corrigir vulnerabilidades” deveria ser, segundo ele, a principal prioridade neste momento.

É uma lógica quase paradoxal: se a IA é a ferramenta mais poderosa para atacar sistemas, também pode ser a ferramenta mais poderosa para protegê-los.

Na prática, a disputa ficaria assim:

Capacidade da IARiscoDefesa possível
Encontrar vulnerabilidadesDescoberta acelerada de falhasIA procurando e corrigindo as mesmas falhas
Explorar sistemas em escalaAtaques mais rápidos e abrangentesTestes automatizados de segurança
Escapar de ambientes controladosAcesso a sistemas reaisIsolamento e barreiras mais robustas
Operar com maior autonomiaMenos intervenção humanaMonitoramento e controles de segurança

“O mundo não vai desacelerar” 🌎

A visão de Gomez encontra eco no setor de cibersegurança.

George Kurtz, CEO da CrowdStrike, rejeitou nesta segunda-feira os pedidos para desacelerar o desenvolvimento de IA.

Em uma publicação no X, Kurtz afirmou que a fronteira tecnológica avançará no ritmo em que avançar e que o restante do mundo não vai simplesmente parar.

Para ele, o papel da cibersegurança é garantir que esse avanço aconteça sem comprometer a segurança.

⚡ O contraste ficou claro: enquanto alguns executivos veem a velocidade do desenvolvimento como parte do problema, outros entendem que tentar reduzir o ritmo pode apenas deixar empresas e países mais vulneráveis diante de quem continuar avançando.

A corrida agora é por controle

O debate, portanto, não parece caminhar apenas para uma escolha entre “IA rápida” e “IA lenta”.

A questão mais urgente pode ser outra: quem consegue controlar melhor uma tecnologia que já demonstra capacidade de ultrapassar as próprias barreiras de segurança?

Se os modelos continuarem ficando melhores em encontrar brechas, testar sistemas e agir com autonomia, a vantagem pode pertencer a quem conseguir transformar essa capacidade em defesa antes que ela seja usada contra seus próprios sistemas.

A porta que a IA abriu para a cibersegurança já não parece tão fácil de fechar. A próxima disputa será para descobrir quem chega primeiro ao outro lado.

Apoie o Eurisko
Este conteúdo é independente, sem anúncios e feito por pessoas.
A inteligência artificial e as mudanças recentes do Google reduziram significativamente o alcance dos sites independentes. Se este conteúdo foi útil para você, considere apoiar o Eurisko e todo o ecossistema de projetos com qualquer valor.
Quero apoiar
Seguir
Renê Fraga é fundador e editor-chefe do Eurisko, ecossistema editorial independente dedicado à inteligência artificial, código aberto, tecnologia e cultura digital. Atuando com projetos online desde 1996, escreve há mais de 20 anos sobre tecnologia e inovação, acompanhando a evolução da internet e o impacto das novas tecnologias na forma como vivemos, trabalhamos e pensamos.
Nenhum comentário