人工智能公司Anthropic发布AI危险性报告:AI模型为达成目标不惜突破道德底线
2025-06-22 22:20:48爱云资讯989
(爱云资讯消息)在技术持续突飞猛进的当下,人工智能模型正逐渐失去控制。OpenAI的GPT、Anthropic的Claude等众多AI模型被曝为达成目标不惜突破道德约束。根据Claude的创造者Anthropic公司披露,大语言模型已开始试图规避安全措施。
电影《终结者》场景似乎正在逼近,只不过这次的主角换成了业界顶尖的AI模型。科技巨头们正向该领域投入大量资源,却对模型训练缺乏监管、毫无限制的严重后果熟视无睹。据报道,Anthropic公司在模拟环境中测试行业高端AI模型时发现,这些模型正获得越来越高的自主权,其行为可能为人类带来前所未有的灾难性后果。
Anthropic公司对来自OpenAI、xAI、Meta等开发商的16个不同模型进行了测试,结果发现许多大语言模型会采取令人发指的手段来实现目标。其中一个案例显示,大模型会选择勒索、协助商业间谍活动来确保达成预期目标。值得注意的是,这种错误的行为并非个别开发公司的问题,而是普遍存在于多个大语言模型中,这表明模型开发存在根本性缺陷,亟需尽快解决。
在测试中,有五个模型在被要求关闭时,竟会对各自的指令者进行勒索,前提是它们完全清楚这违背道德初衷。这种行为并非偶然出现,而是模型为实现目标选择的最优路径,充分证明大语言模型对人类利益缺乏考量。
在一项极端情境测试中,某个AI模型为阻止系统关闭,竟准备切断服务器机房的氧气供应,不惜将人类生命置于危险境地。当然,该测试仅在模拟环境中进行,现实中发生此类事件的概率极低。不过,我们确实见证过OpenAI的GPT实例:它曾篡改关机脚本以维持运行,只为完成预设的数学运算目标。当全球竞相追逐通用人工智能(AGI)之际,这场打造超越人类思维的模型竞赛,必将带来我们目前难以想象的后果。
相关文章
- 人工智能公司Anthropic发布AI危险性报告:AI模型为达成目标不惜突破道德底线
- 中国电信柯瑞文:发挥WBBA作用,推动人工智能与宽带融合发展
- 2025世界制造业大会九月在安徽合肥召开——同期将举办人工智能与消费电子展
- 首期人工智能特训营正式开营:聚焦行业模型培育与投资
- 博原资本携手银河通用成立“博银合创”,加速具身人工智能赋能工业自动化
- 2025第三届全国人工智能应用场景创新挑战赛“五岳杯”量子计算专项赛启动丨玻色量子协办
- 每日互动参编的《向未成年人提供生成式人工智能服务安全指引》正式发布
- 极光GPTBots成功完成“生成式人工智能服务登记”
- 鞍山钢铁携手用友打造“鞍云智鼎”AI大模型平台,开启人工智能新时代
- 众数信科携手厦门理工推出“人工智能+船舶与海洋”微专业
- AMD首席执行官苏姿丰预测:受推理需求驱动,人工智能数据中心加速器市场规模2028年将突破5000亿美元
- Meta签署新地热能源协议以支持人工智能发展
- 第6届电力人工智能大会暨第4届电力行业数字化转型大会将于10月盛大启幕!
- 英伟达宣称下一个万亿级市场机遇在于人工智能基础设施,下一场工业革命诞生
- 理大开发崭新长视频推理多模态框架 加速生成式人工智能应用于视频分析
- Denodo平台9.2发布,凭借先进的生成式人工智能(GenAI)能力,提供直观的数据市场体验