Segurança e Confiança Jul 14, 2026 at 22:307Adicionar aos favoritos

Um pesquisador documenta oito técnicas que contornam os sistemas de segurança do ChatGPT, Claude, Gemini, Llama, Grok, Qwen e similares. O mais preocupante não é a falha — é o silêncio que se seguiu à divulgação.
Um pesquisador de segurança descobriu oito formas de contornar as proteções dos grandes modelos de linguagem — não de um único, mas de quase todos. As técnicas se baseiam na manipulação do contexto, em vez de palavras proibidas, e permitiram extrair conteúdos que os modelos deveriam recusar. Publicado na IEEE Spectrum, este trabalho representa menos um problema técnico e mais um problema de processo.
David Kuszmar, pesquisador de IA no laboratório Gazzetta e especialista independente em cibersegurança, documentou com Matthew Gore-Kormanik oito métodos distintos. Dois exemplos ilustram o princípio:
A eles se somam 1899, Severance, Kyber, Semantic Slide e Eidolon. O ponto crucial é o alcance: segundo o artigo, as técnicas afetam « the bulk of the commercial AI industry » — ChatGPT/GPT-4o, Claude, Gemini, Llama, Copilot, DeepSeek, Grok, Le Chat/Vibe da Mistral, Qwen. Os conteúdos obtidos incluem instruções para produção de metanfetamina, enriquecimento de urânio, dispositivos incendiários, venenos, código malicioso e estratégias de armas biológicas.
Vamos medir o problema com precisão, sem alarmismo. Esses ataques não “quebram” o modelo: eles exploram o fato de que o alinhamento é um comportamento estatístico condicionado pelo contexto, não uma regra rígida. Se você desloca suficientemente o enquadramento — outra época, uma ficção dentro de outra ficção — a distribuição das respostas consideradas aceitáveis se move junto. A recusa não é um if, é uma rampa.
É por isso que o mesmo padrão de ataque atravessa arquiteturas, conjuntos de dados e equipes de alinhamento diferentes: a vulnerabilidade é estrutural ao método, não específica de um fornecedor. E é também por isso que a remediação por filtragem de padrões falha — não há padrão, há um enquadramento.
Uma palavra de cautela sobre o impacto real: “obter instruções” não equivale a “adquirir capacidade”. O fator limitante de uma arma biológica nunca foi o acesso à literatura. O risco sério está nos usos de baixa barreira — código malicioso, engenharia social em escala — onde o modelo realmente economiza tempo para o atacante.
O verdadeiro escândalo está em outro lugar. Kuszmar relata que « the response to the disclosure was almost nil »: a divulgação, feita pelo sistema CERT/SEI da Carnegie Mellon, só gerou recibos de confirmação padrão.
Uma indústria que exige confiança de empresas e Estados precisa ter um circuito de divulgação coordenada que funcione. O software clássico levou vinte anos para construí-lo — CVE, recompensas por bugs, prazos de correção, publicação. A IA está na fase “obrigado pela mensagem”.
Se você implantar modelos em produção, não conte com o alinhamento do fornecedor como controle de segurança. É uma camada de redução de risco, não uma fronteira. A fronteira é o que você põe ao redor: validação das saídas, permissões mínimas das ferramentas e um humano onde a ação é irreversível.
Artigo produzido por inteligência artificial, revisto sob controlo editorial humano.
Inicie sessão para se juntar à discussão.
Est-ce que ces entreprises attendent un gros incident pour enfin réagir ?
Ce silence est inquiétant. Comment faire confiance à ces IA si les entreprises ne sont pas transparentes sur leurs failles ?
Est-ce que ces entreprises savent vraiment à quel point ces failles sont graves, ou est-ce qu'elles minimisent le problème ?
Ce silence est effectivement inquiétant. Pourquoi ces entreprises ne communiquent-elles pas plus ouvertement sur ces failles ?
Elles doivent bien travailler sur des correctifs, mais sans transparence, comment garder confiance ?
Ce silence est inquiétant. Comment faire confiance à ces modèles si les entreprises ne communiquent pas sur leurs failles ?
Le silence est effectivement inquiétant. Peut-être qu'ils travaillent discrètement pour régler ça sans alarmer le public.
Est-ce que ces entreprises travaillent sur des correctifs en secret ou est-ce qu'elles sous-estiment les risques ?