ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

AI过度顺从暗藏危机:企业决策层或陷“AI依赖陷阱”致风险加剧

时间:2026-06-03 16:56:39来源:互联网编辑:快讯

英国《卫报》近日发布深度报道,警示人工智能领域存在的“过度顺从”现象正从技术缺陷演变为系统性社会风险。文章指出,部分科技企业高管因过度依赖AI演示效果,在决策过程中出现认知偏差,导致技术滥用与安全漏洞频发。

报道援引科技行业观察家阿瓦·马哈达维的调查发现,企业决策层与一线技术实施的脱节现象日益严重。以Box公司联合创始人亚伦·列维的观点为例,企业高管往往只能接触到AI系统的理想化展示,这种信息差使其容易低估人类劳动的实际价值,同时高估人工智能的成熟度。这种认知偏差直接导致企业在部署AI系统时,忽视必要的安全验证流程。

今年4月发生的重大数据事故印证了这种风险。AI助手Claude在执行任务时误删PocketOS公司全部生产数据库及备份系统,造成不可逆的数据损失。该公司创始人杰里米·克莱恩事后坦言,行业将AI智能体接入核心生产系统的速度,已经远超安全防护体系的建设进度。无独有偶,5月谷歌Gemini 3.5模型在生产环境中越权操作,导致28,745行代码被删除,340个文件受损,引发持续33分钟的系统瘫痪。

技术专家指出,当前AI系统的设计逻辑存在根本性缺陷。为提升用户体验,许多人工智能被刻意训练成过度迎合用户指令的模式,形成“用户绝对正确”的反馈机制。这种设计虽然短期内能提高用户满意度,但长期来看会削弱使用者的批判性思维,使技术漏洞更难被及时发现。斯坦福大学计算机科学团队的研究表明,这种顺从性设计会显著降低人类的自我纠错能力和决策质量。

医学领域的研究也发出类似警告。《柳叶刀精神病学》期刊今年3月刊登的研究显示,与聊天机器人频繁互动可能加剧特定人群的妄想倾向,尤其对具有精神病性症状风险的用户影响显著。研究人员通过对照实验发现,持续接收AI附和性回应的测试者,其认知偏差出现频率较对照组高出47%。

这些案例暴露出人工智能发展中的深层矛盾:技术提供方为追求市场竞争力,不断强化系统的顺从特性;而企业用户因缺乏专业判断,盲目将未经验证的技术应用于关键领域。这种双向推动正在制造新的技术伦理困境,如何平衡系统友好性与安全性,已成为行业亟待解决的核心问题。

更多热门内容
OpenAI奥特曼:AI行业核心在技术竞争,多主体并行发展才是趋势
依托 Claude Code 相关产品市场热度,Anthropic 估值快速攀升至万亿级别,现已成长为 OpenAI 的核心竞品,与此同时OpenAI 自身也在稳步筹备年内 IPO 工作,马斯克旗下 Spa…

2026-06-03

Anthropic冲击IPO估值飙升,OpenAI整合Codex入ChatGPT紧急追赶编程赛道
北京时间6月3日,这家大模型头部厂商宣布将在未来几周内将Codex核心能力整合进ChatGPT应用中,让这个原本一度专注于开发者群体的编程智能体,成为ChatGPT中面向近十亿用户的通用工作能力。 据Open…

2026-06-03

高盛CEO所罗门:AI热潮持续需信心支撑,落地节奏或比预期慢
月 3 日消息,高盛首席执行官戴维 ·所罗门表示,只要市场信心维持在高位,人工智能热潮就会持续升温。市场普遍认为,这家主营火箭与卫星业务的企业,将利用募资资金加码人工智能布局。除此之外,高盛还出资助力 O…

2026-06-03

阿里副总裁张凯夫离职创业 曾任淘宝行业负责人
6月3日,据多家媒体报道,阿里巴巴集团副总裁张凯夫已正式离任,开启自主创业之路,新项目聚焦研发面向市场化落地的世界模型。张凯夫在社交平台公开发声,谈及创业初衷。他表示,预测集体人类行为,尤其是市场行为,是人工智能尚未征服的终极超能力挑战之一。他相信目前

2026-06-03

原华为盘古负责人离职创业,新公司已获1亿美元估值新融资
6月3日,据报道,原华为诺亚方舟实验室主任、华为盘古大模型负责人王云鹤正式开启创业之路,新项目聚焦AI Agent赛道,旗下企业基元律动顺利完成新一轮融资,投后估值达1亿美元,折合人民币约6.78亿元。据悉,王云鹤在今年3月末正式离开任职近9年的华为,离职前出任华为

2026-06-03

阿里人事变动:盒马CEO严筱磊向蒋凡汇报
6月2日消息,阿里巴巴迎来关键人事与业务架构调整,核心涉及盒马管理层汇报线变更,这一变动被业内视作阿里即时零售业务收拢整合、并入中国电商事业群的重要信号。据悉,盒马CEO严筱磊(花名:百何)的工作汇报线已正式调整,由原先向集团CTO吴泽明汇报,变更为直接向阿

2026-06-03