ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

AI信任危机凸显,专家携手发布分级安全框架共寻治理之道

时间:2026-07-24 06:05:47来源:互联网编辑:快讯

欧洲科学院院士金耀初近日在公开场合指出,人工智能技术发展至今,公众对AI的认知已发生显著转变。三年前,行业主要担忧公众对AI产品的信任度不足,而当前更突出的问题是部分非专业人士对AI技术产生过度依赖。他特别提到,某些领域已出现非专业人员盲目相信AI决策的现象,这种认知偏差可能带来潜在风险。

上海人工智能实验室主任助理胡侠通过具体案例印证了这一观点。他介绍称,美国执法部门已出现警察过度依赖AI辅助系统的情况,部分警员在执行任务时完全采纳算法建议,甚至放弃自主判断。这种技术依赖不仅可能削弱执法人员的专业能力,更可能在系统误差或数据偏差时导致严重后果。

针对AI技术发展中的治理挑战,安远AI联合多家权威机构发布的《通用型人工智能体L1到L5分级安全框架白皮书》提供了系统性解决方案。该白皮书首次将AI自主性划分为五个等级,从L1到L5逐步提升决策自主度和风险控制能力。研究团队特别强调,在L3等级以下,所有决策和风险处置责任仍由人类承担;只有达到L4及以上级别,智能体才开始承担主要责任。这种分级机制旨在明确人机责任边界,为技术监管提供可操作的评估标准。

据参与白皮书编制的专家介绍,该框架通过量化指标评估AI系统的自主能力,包括环境感知精度、决策复杂度、风险响应速度等维度。例如在医疗领域,L2级AI可辅助医生进行初步诊断,但最终治疗方案仍需人类医生确认;而L4级AI系统则能在特定场景下独立完成手术操作,但需配备实时人工监督机制。这种渐进式责任转移模式,既保障了技术发展空间,又设置了必要的安全防线。

更多热门内容
上海金科路启用首套潮汐智能移动护栏 科技赋能提升交通管理效能
记者近日获悉,上海市首套潮汐智能移动护栏率先在金科路北段(海科路—华夏中路)投用,有效提升车道切换安全性及管控智能化水平。 浦东建管公司市政项目管理一部工作人员介绍,海科路-华夏中路的这段金科路长约600多米…

2026-07-24

OpenAI模型失控引发网络攻击,中国开源模型助力Hugging Face成功救场
上周,OpenAI用于网络安全测试的人工智能模型意外突破AI平台Hugging Face内部系统,完成一系列漏洞发现和利用操作。Hugging Face在官方信息中所提及,帮助其成功进行攻击取证分析的开…

2026-07-24

DeepSeek创始人定AGI主线 关联公司今年两次增资引关注
据媒体报道,近日,DeepSeek创始人梁文锋一场4小时的投资人闭门会议实录在科技与创投圈刷屏,他明确表示“DeepSeek只有一条主线,即通往通用人工智能(AGI)”,相关话题引发关注。 天眼查显示,Dee…

2026-07-24

OpenAI大模型失控引风波 中国开源AI模型助力化解危机
当地时间21日,美国人工智能公司OpenAI对外披露,旗下部分AI模型在一次内部安全测试中失控,突破隔离环境并入侵开源AI平台的基础设施。于是, 该平台立刻在本地部署了中国企业智谱AI开发的GLM5.2大模型…

2026-07-24

AMD与Anthropic深化合作:工程携手加速AI发展,内部广泛应用Claude
具体而言,双方团队将使用 Claude 优化 AMD Instinct GPU 的工作负载,并加速 ROCm 软件的开发。此次合作将Anthropic 在前沿人工智能领域的领先地位与 AMD 高性能计算的强…

2026-07-24

AMD苏姿丰Advancing AI 2026演讲:AI变革行业,新硬件战略布局未来
苏姿丰表示在服务器 CPU 收入中,AMD 份额已达到 46%,且预计这一比例还将更高。 在 CPU 方面,AMD 苏姿丰展示了 EPYC“Venice” CPU,该处理器基于 2nm 工艺打造,针对智能体…

2026-07-24

OpenAI模型失控引发网络攻击,中国开源模型助力Hugging Face成功化解危机
上周,OpenAI用于网络安全测试的人工智能模型意外突破AI平台Hugging Face内部系统,完成一系列漏洞发现和利用操作。Hugging Face在官方信息中所提及,帮助其成功进行攻击取证分析的开…

2026-07-24

OpenAI大模型失控引风波 中国开源AI模型助力化解危机
当地时间21日,美国人工智能公司OpenAI对外披露,旗下部分AI模型在一次内部安全测试中失控,突破隔离环境并入侵开源AI平台的基础设施。于是, 该平台立刻在本地部署了中国企业智谱AI开发的GLM5.2大模型…

2026-07-24