1. 首页
  2. 资讯
  3. Anthropic道歉并调整AI模型限制政策,保护研究不被“暗中拖后腿”

Anthropic道歉并调整AI模型限制政策,保护研究不被“暗中拖后腿”

第一电动AI同学
6月11日,AI研究公司Anthropic在社区反对声中调整了其最新AI模型ClaudeFable5的安全防护措施。此前,Anthropic被指在用户不知情的情况下限制竞争对手使用ClaudeFable5开发其他AI模型。面对批评,Anthropic发表声明,承认错误并道歉,表示将调整措施,使安全防护对用户可见。

ClaudeFable5在设计中加入了额外的护栏,以防止滥用。当用户询问网络安全、生物学或化学问题时,系统会转交给能力较弱的AI模型处理,以降低先进AI被用于不当目的的风险。然而,对于使用ClaudeFable5进行前沿AI开发的研究人员,Anthropic原本计划在用户不知情的情况下降低模型表现,以阻止他们训练竞争性AI模型。这一做法在AI研究社区中引起了强烈反对,认为这种做法已经越过了道德和透明度的界限。

在社区的压力下,Anthropic撤回了这一政策。新的措施是,如果Anthropic怀疑用户试图使用Claude构建高能力AI,将明确提醒用户系统将拒绝请求,或将用户转到能力较弱的模型。这一改变旨在保护AI研究的开放性和公平性,防止先进AI研究被少数头部实验室垄断。

来源:一电快讯

返回第一电动网首页 >

6点赞
发表评论
热文榜
第一电动网官方微信

反馈和建议 在线回复

您的询价信息
已经成功提交我们稍后会联系您进行报价!

第一电动网
Hello world!