Microsoft 与 Hugging Face 发布 ThinkingBox 智能体状态基准
Microsoft 与 Hugging Face 联合发布 ThinkingBox 智能体沙箱和 ThinkingBox-Bench 基准,依据数据库终态判定智能体任务成败。
推荐理由:该基准以数据库终态而非模型回复判定智能体成功,并给出 507 个任务重复 20 次的一致性与成本数据,可供部署时比较模型。
技术方向
开源模型、框架与仓库动态:权重开放、社区项目爆火、开源与闭源的力量消长。
22 条精选近 30 天 22 条共收录 65 条
Microsoft 与 Hugging Face 联合发布 ThinkingBox 智能体沙箱和 ThinkingBox-Bench 基准,依据数据库终态判定智能体任务成败。
推荐理由:该基准以数据库终态而非模型回复判定智能体成功,并给出 507 个任务重复 20 次的一致性与成本数据,可供部署时比较模型。
Google DeepMind 推出 SynthID Bio,一种在不影响蛋白质生物功能的前提下为 AI 生成蛋白质嵌入可验证水印的方法。针对 VEGF-A、SARS-CoV-2 刺突蛋白 RBD 和 PD-L1 的湿实验显示,水印设计的命中率、结合亲和力和天然序列多样性与非水印版本相当。DeepMind 公开方法论文并开源代码、体外数据及权重,以支持生物安全社区协作。
推荐理由:原文给出三种靶标蛋白上水印与未水印设计的结合亲和力相当,并说明该方法可嵌入模型权重保证可检测性,为生物安全筛选提供了可执行的验证层。