← 返回精选

Google DeepMind · 论文 · 2026-08-27 20:59

Google DeepMind 联合新加坡 AI 安全研究所等试点双重盲测 AI 评测

Piloting the world's first double-blind AI evaluations

Google DeepMind 联合新加坡 AI 安全研究所、OpenMined、AVERI 与 MLCommons,对 Gemini Flash Lite 试点双重盲测评测,把外部评测限制在密码学隔离环境中。该做法针对基准污染问题,即模型若提前看到测试题会人为抬高分数、削弱基准可信度。Google 表示过去依靠零日志协议与合同约束保密,此次增加了技术与密码学层面的保障。

AI 评分53原文

Google DeepMind 联合新加坡 AI 安全研究所、OpenMined、AVERI 与 MLCommons,对 Gemini Flash Lite 试点双重盲测评测,把外部评测限制在密码学隔离环境中。该做法针对基准污染问题,即模型若提前看到测试题会人为抬高分数、削弱基准可信度。Google 表示过去依靠零日志协议与合同约束保密,此次增加了技术与密码学层面的保障。

阅读原文