ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

英特尔高级矩阵扩展技术:助力AI工作负载飞跃提升

时间:2024-11-13 15:44:07来源:ITBEAR编辑:瑞雪

【ITBEAR】在AI技术日益融入企业核心应用的今天,英特尔推出的第四代和第五代至强可扩展处理器正引领着一场性能革命。这些处理器内置的英特尔高级矩阵扩展(AMX),显著提升了AI功能,为企业优化AI管线带来了新的可能。

与第三代英特尔至强可扩展处理器相比,第五代产品的推理工作负载性能提升了高达10倍,每瓦性能也提升了7倍。这一飞跃性的进步,意味着企业在运行AI应用时能够更高效地处理复杂环境和海量数据,从而解锁更多商业价值。

如今,AI已广泛应用于图书和电影推荐、数字化零售、自然语言处理等多个领域。随着技术的不断发展,预计到2025年,将有90%新发布的企业应用版本包含嵌入式AI功能。在这一趋势下,英特尔的第四代和第五代至强可扩展处理器成为了企业优化AI管线的理想之选。

内置AI加速器的处理器之所以受到青睐,是因为它们能够针对AI推理工作负载提供出色的性能。英特尔的AMX技术专为平衡推理而设计,同时具备更强的训练能力。目前,在已装机的数据中心处理单元中,英特尔至强可扩展处理器占据了高达65%的市场份额。选择内置AMX的第四代和第五代产品,无疑是一种既高效又具有成本效益的AI工作负载加速方式。

相较于采用英特尔深度学习加速技术(DL Boost)的第三代产品,内置AMX的第五代至强可扩展处理器在实时推理性能上有了显著提升。具体来说,其性能提升了1.23至1.35倍,每瓦性能也提升了1.2至1.38倍。这一进步为企业带来了更低的总体拥有成本(TCO)和更高的能效。

以NLP推理工作负载为例,仅需13台基于第五代英特尔至强可扩展处理器的服务器,就能达到50台第三代产品服务器的性能水平。这不仅降低了能耗和CO2排放量,还实现了高达64%的TCO节约。英特尔AMX带来的性能提升远超过历代产品通过增加内核所实现的进步,为企业在AI领域的持续创新提供了有力支持。

更多热门内容
南京大学 鲲鹏昇腾科教创新孵化中心揭牌,引领高校科研生态新模式
11月12日,南京大学与华为技术有限公司在南京大学仙林校区签署合作协议,宣布“南京大学 鲲鹏昇腾科教创新孵化中心”(以下简称“孵化中心”)正式揭牌成立。未来双方将依托孵化中心,基于鲲鹏昇腾技术路线,在科研创新与人才培养方面展开深入合作,建立高校科研生态发展

2024-11-13