CEVIU Logo
Voltar
Nova Técnica GRAM Promete Controlar Conhecimento de Duplo Uso em Modelos de IA

Nova Técnica GRAM Promete Controlar Conhecimento de Duplo Uso em Modelos de IA

Aprofundamento CEVIU

Aprofundamento

A técnica GRAM (Gradient-Routed Auxiliary Modules) da Anthropic representa um avanço significativo no controle de modelos de IA, especialmente para desenvolvedores preocupados com a segurança e a ética. O cerne da abordagem é a modularidade. Em vez de treinar modelos separados para diferentes capacidades ou usar filtros de dados brutos, o GRAM injeta neurônios auxiliares em cada camada de um Transformer. Esses neurônios são agrupados em módulos, cada um dedicado a uma categoria específica de conhecimento de duplo uso, como cibersegurança ou virologia.

Quando o modelo GRAM aprende com dados de uma categoria de duplo uso, apenas o módulo correspondente aprende, enquanto os pesos gerais da rede neural são temporariamente congelados. Isso garante que o conhecimento específico se acumule apenas onde é desejado. Depois do treinamento, um módulo pode ser desativado ou removido, eliminando aquela capacidade sem degradar a performance geral do modelo. Este método se mostra resistente a tentativas de reativar o conhecimento suprimido e a escalabilidade é promissora: quanto maior o modelo, mais difícil e custoso se torna tentar burlar as proteções.

O que mudou

A grande virada do GRAM em relação a trabalhos anteriores é sua eficiência no treinamento. Antes, para gerenciar o conhecimento de duplo uso, a Anthropic explorava filtrar informações na pré-treinamento ou confinar o conhecimento a uma "fatia removível" dos pesos do modelo. Contudo, essas abordagens eram inflexíveis; exigiam treinar modelos inteiros diferentes para cada conjunto de capacidades desejado.

O GRAM entrega a capacidade de configurar múltiplas versões de um modelo, com diferentes conjuntos de habilidades de duplo uso ativadas ou desativadas, a partir de um único treinamento. Isso transforma a gestão de conhecimento sensível, tornando-a muito mais granular, configurável e escalável, minimizando o custo computacional e o esforço de desenvolvimento associado.

Por que isso importa

O controle do conhecimento de duplo uso é crucial para o futuro da IA responsável. Notícias como a "Nova Técnica SkillCloak Burla Scanners Estáticos em Agentes de IA Maliciosos", publicada pelo CEVIU em 7 de julho de 2026, ou as "Ameaças em Registros de Skills para Agentes de IA" (9 de julho de 2026), mostram a facilidade com que agentes maliciosos podem explorar as capacidades da IA. Embora o Google tenha divulgado um roadmap para segurança de agentes de IA em 19 de junho de 2026, a maioria das salvaguardas atuais foca em filtrar saídas ou refutar pedidos, sem tocar no conhecimento subjacente do modelo.

O GRAM oferece um caminho para uma defesa mais profunda, atuando diretamente na arquitetura do modelo para controlar o que a IA "sabe" e como esse conhecimento pode ser acessado. Para desenvolvedores, isso significa a possibilidade de criar sistemas mais seguros e éticos, com controle cirúrgico sobre capacidades que, se mal utilizadas, poderiam causar danos significativos. É um passo em direção a um desenvolvimento de IA onde a segurança é intrínseca, não apenas uma camada superficial.

Linha do tempo

  1. Mastercard revela novo modelo de IA Generativa

  2. IA em casa: assistentes pessoais e tradução de libras podem ganhar novo fôlego com modelos avançados

  3. Google divulga roadmap para segurança de agentes de IA

  4. Nova Técnica SkillCloak Burla Scanners Estáticos em Agentes de IA Maliciosos

  5. Ameaças em Registros de Skills para Agentes de IA: Um Novo Paradigma na Cibersegurança

  6. Anthropic Apresenta Mecanismo de Desativação para Conhecimento de Duplo Uso em Modelos de IA (GRAM)

Perguntas frequentes

O que é o conhecimento de duplo uso em modelos de IA?

Conhecimento de duplo uso se refere a informações ou capacidades que um modelo de IA possui e que podem ser empregadas tanto para fins benéficos quanto maliciosos. Um exemplo é o conhecimento em cibersegurança, que pode ser usado para proteger sistemas ou para explorar vulnerabilidades.

Como a técnica GRAM funciona tecnicamente?

O GRAM (Gradient-Routed Auxiliary Modules) insere neurônios adicionais, chamados módulos, em cada camada de um Transformer. Quando o modelo aprende dados de uma categoria de duplo uso, apenas o módulo correspondente é ativado e aprende, enquanto o restante da rede fica congelado. Isso permite que o conhecimento específico se concentre nesses módulos, que podem ser ativados ou desativados conforme a necessidade.

Quais as principais vantagens do GRAM em relação aos métodos anteriores de controle de conhecimento?

A principal vantagem é a flexibilidade e a eficiência. Métodos anteriores, como filtragem de dados, exigiam o treinamento de múltiplos modelos para cada configuração de capacidade desejada. O GRAM permite configurar diversas versões de um modelo, ativando ou desativando capacidades de duplo uso, a partir de um único treinamento, otimizando custos e tempo de desenvolvimento.

Existem limitações para a aplicação do GRAM?

Sim, a pesquisa é preliminar. O GRAM ainda não foi testado em modelos de grande escala ou em pipelines de produção. As avaliações atuais medem a capacidade de previsão do próximo token, não o desempenho em tarefas do mundo real. Há também o desafio de algumas capacidades de duplo uso estarem tão entrelaçadas com o conhecimento geral que seria difícil separá-las completamente.

Fontes

Avalie este artigo:
Compartilhar:
Categoria
CEVIU Web Dev
Publicado
11 de julho de 2026
Editoria
CEVIU Web Dev

Quer receber mais sobre CEVIU Web Dev?

Conteúdo curado diariamente, direto no seu e-mail.

Conteúdo curado diariamenteDiversas categoriasCancele quando quiser