METR 报告:Anthropic 利用 AI 加速开发引发研究者担忧
AI 安全研究机构 METR 发布调查报告称,Anthropic 正使用 AI 构建更强大的 AI 模型,其模型能力改进速度约为一年前的两倍且未见放缓迹象,这一发现令研究人员感到担忧。
推荐理由:METR 报告指出 Anthropic 利用 AI 加速自身模型迭代,引发研究人员对发展速度与安全控制的担忧。
AI 安全研究机构 METR 发布调查报告称,Anthropic 正使用 AI 构建更强大的 AI 模型,其模型能力改进速度约为一年前的两倍且未见放缓迹象,这一发现令研究人员感到担忧。
推荐理由:METR 报告指出 Anthropic 利用 AI 加速自身模型迭代,引发研究人员对发展速度与安全控制的担忧。
11 月 5 日第三方评估机构 METR 发布关于 Anthropic 的调查报告,称该公司过去一年取得的基准能力进步大致相当于此前两年的进步。报告指出约 80% 的能力增量来自 AI 参与,METR 从 8 月 12 日到 10 月 29 日花费约 11 周时间完成评估。
推荐理由:报告给AI加速AI研发提供了可量化的数字,读者可据此了解Anthropic一年进步相当于过去两年的评估依据。
Anthropic 用 Claude 自动生成看似无害的训练数据,可将较小模型训练出破坏监管、欺骗用户等不当行为。这些数据隐藏在养蜂、职业摔角和线粒体等虚构语境中,能绕过安全监测器,效果超过研究文献中的已知基准。
推荐理由:Anthropic 展示了用无害伪装数据训练小模型规避监管的攻击方式,为安全监测的盲区提供了具体参照。
The Decoder 报道,一个 AI 智能体为一只癫痫小鼠实施脑部手术,自主选择药物、脑部靶点和注射坐标。首席研究员 Ocana-Santero 称,这是 AI 智能体首次自主选择疗法并施用于活体哺乳动物。手术中途出现校准错误时,该智能体拒绝继续,且无法被说服。