.webp){kind=small}
O Instituto Nacional de Padrões e Tecnologia lançou na segunda-feira um novo programa que concede aos pesquisador acesso a um ambiente de teste isolado para avaliar com segurança modelos de inteligência artificial em relação a vários comandos.
A Avaliação de Tecnologia de IA, ou ATÉ, em veículo de teste voluntário focado na análise de segurança de modelos de IA.
Ele fornece dados cegos para os modelos processarem ao concluir tarefas para obter visões objetivos e conduzir avaliações dos recursos do modelo.
Notavelmente, os dados de avaliação não se destinam a servir como dados de treinamento para os modelos.
Inicialmente, ATÉ se concentraram condução de tarefas de análise de imagens usando modelos de linguagem de visão ampla em três domínios: ciência quântica, genômica e segurança pública.
Mais tarefas estarão disponíveis no futuro.
O objetivo fundamental da ATÉ oferecer uma rubrica universal para avaliar efetivamente as capacidades dos modelos de IA e determinar o estado da arte para o desempenho do modelo.
“A infraestrutura fornecida pelo NIST fornecerá dados, métricas e pontuação comuns para ajudar os desenvolvedores a compreender o desempenho de seus modelos”, disse o comunicado à imprensa.
Tanto os fornecedores de dados como os fornecedores de modelos que trabalham com a ATÉ terão de submeter materiais relacionados com os testes.
Os provedores de dados são solicitados a enviar conjuntos de dados originais que são inacessíveis publicamente, juntamente com uma tarefa “significativa” adequada para os dados.
Os desenvolvedores de modelos, da mesma forma, enviarão seus modelos de IA para serem testados usando os conjuntos de dados.
O primeiro conjunto de avaliações começaram agosto de 2026.
A formação da ATÉ e passo mais recente na estratégia da administração Trump de trabalhar com os principais desenvolvedores de IA no avanço da segurança de modelos por meio de envios voluntários de modelos.
O Departamento de Comércio anunciou um acordo renegociado em maio entre a agência e três empresas — Google DeepMind, Microsoft e xAI — para avaliar seus modelos por meio do Centro de Padrões e Inovação de IA.
O AR NEWS 24H publica artigos de várias fontes externas que expressam uma ampla gama de pontos de vista. As posições tomadas nestes artigos não são necessariamente as do AR NEWS 24H.
