分享好友 最新动态首页 最新动态分类 切换频道
一年发两代至强服务器CPU,英特尔在「卷」什么?
2024-12-25 17:46

2023年初,代号“Sapphire Rapids”的第四代英特尔至强可拓展处理器发布。

2023年底,代号Emerald Rapids的第五代英特尔至强可扩展处理器(以下简称第五代至强)也正式推出。

英特尔一年卷出两代产品的关键到底是什么?

生成式AI需要什么样的处理器?

“以前模型都比较小,现在模型变大后,单芯片的能力,甚至是单服务器的能力都未必能够满足生成式AI的诉求,所以互联互通的能力非常重要,这是芯片需要具备的非常重要的能力。”火山引擎IAAS产品负责人李越渊对雷峰网(公众号:雷峰网)表示。

这正是第五代至强升级的一个重点,第五代至强具备8条DDR5通道,支持5,600 MT/s的传输速率,且采用英特尔超级通道互联(英特尔UPI)2.0以增加跨插槽内带宽,提供高达 20 GT/s的传输。领先的云服务供应商(CSP)采用基于第五代至强的实例,将能够使用CXL Type 3内存设备来扩展内存容量。

王伟透露,阿里在自研的第八代服务器上做了各种AI尝试,发现生成式AI对于CPU已经不算挑战。使用CPU进行通义千问7B/14B/72B这样较大规模模型的推理,已经可以在单个阿里鱼第八代ECS实例上运行。

这得益于第五代至强每个内核均具备AI加速功能,不用添加独立的加速器,就可以处理端到端的工作负载。英特尔采用内部模型的测试结果显示,参数量多达200亿的大语言模型的推理性能提高42%,延迟低于100毫秒。

“AI模型是每个公司最重要的资产,所以会非常关注自身数据的安全和模型安全。”李越渊指出,“英特尔在这上面做了很多努力和尝试,包括英特尔TDX可以更加透明、低门槛的让客户实现端到端的安全,我们云厂商也非常关注芯片的安全性能。”

年初发布的第四代英特尔至强可扩展处理器就已经集成了英特尔可信域拓展(英特尔TDX),能够提供虚拟机(VM)层面的隔离和保密性,增强隐私性和对数据的管理,随着新产品的推出,所有OEM和CSP解决方案提供商均可启用该功能。

显然,英特尔一年推出两代产品,主要还是为了满足客户的需求。

“客户能否依赖我们的产品进行演进,我们也是非常紧密的跟像阿里或者是字节沟通。”陈葆立说,“我们不管什么产品,在早期的沟通得到反馈后,我们会做相应的改进。我们也希望我们承诺的东西能够满足客户最终的需求,以客户为优先拥抱市场。”

至强CPU有什么优势?

AI训练并不是CPU的强项,GPU有架构优势。

“在推理任务中,CPU的容忍度更高一些,更有可能很好的完成任务。”李越渊表示。

不过,在每个核加入AI加速单元后,至强CPU已经不是传统意义的CPU。

王伟认为,“尝试在通用CPU中加一些向量计算单元,有利于面向AI场景,随着AI的应用发展,CPU和GPU这两种体系架构的融合芯片会走向必然。

不可忽视的是,无论是CPU、GPU、NPU还是各种AI加速器,在生成式AI快速发展的时刻,都有巨大的机会,特别是在推理市场。埃文斯数据公司的调查数据显示,边缘和客户端设备对推理的需求相比数据中心超过了1.4倍。

此时能够更好满足客户推理需求的产品更容易获得青睐。

“长期来看,我们也会更多关注大模型AI推理侧,如何通过降低对算力的诉求,更好的孵化大模型在推理侧的应用和发展。”王伟认为,“未来大模型AI推理的算力需求一定会持续下降,降低到端云结合的方式可以进行大模型AI推理,甚至在部分AI大模型推理应用中,算力需求量应该要降到端侧的单颗芯片即可完成,比如一部手机。

这是英特尔至强的机会所在。英特尔也在努力降低客户的总体拥有成本(TCO),对于遵循典型的五年更新周期并从更前一代处理器进行升级的客户,总体拥有成本最多可降低77%。

陈葆立强调,“我们保持平台延伸性,不管是软件厂商或者是一体机提供商,升级到第五代英特尔至强可扩展处理将非常快的,因为整个平台验证和软件验证都做完了。”

最新文章
喜报!iTEST获评2024年度“人工智能+教育”典型案例
随着大模型、知识图谱、智能语音等人工智能技术加速创新,人工智能在教育领域中的应用日益深入,“人工智能+教育”进入发展快车道,深刻改变着教育教学方式、人才培养模式和教育管理形式,政产学研用相关各方积极从政策指引、技术攻关、产
班级优化大师APP
班级优化大师专为中小学教师打造。现已获全国超200万教师的喜爱和肯定,成为新时代下教师开展学生评价、家校沟通、课堂互动等教学活动的主流选择!1、管理班级更高效,还能和家长随时沟通2、随时发送重要通知给各位家长3、家长的不同想法,
浙版传媒:探索推动AI技术在选题策划、精准营销等领域的应用|直击业绩会
①公司将积极探索并推动AI技术在选题策划、辅助文字、绘画创作、精准营销等领域的应用。②全年线上业务营收31.55亿元,同比增长17.15%。③今年继续通过设立数字产业基金方式,持续跟踪储备未来可进一步参股或收并购的优质项目。财联社5月25
谷歌搜索引擎怎么搜客户
在谷歌搜索引擎中寻找客户,可以采取以下几种方法:1. 关键词搜索: - 根据您的业务类型和目标客户,使用相关的关键词进行搜索。例如,如果您经营的是一家咖啡店,可以搜索“咖啡爱好者”或者“附近咖啡馆推荐”。2. 使用社交媒体: - 在谷
WWE系列游戏推荐:2021年度最具娱乐性的摔跤游戏大盘点!
WWE游戏:摔跤爱好者的必玩之选WWE(世界摔跤娱乐)一直是摔跤游戏的代表品牌,每年都会推出新作,带给玩家最具冲击力和娱乐性的摔跤体验。对于喜欢这类游戏的玩家来说,了解最新的WWE游戏排名以及玩法特点至关重要。2021年,随着游戏技术
微信小程序API 获取小程序页面二维码
参数类型默认值说明sceneString最大32个可见字符,只支持数字,大小写英文以及部分特殊字符,其它字符需要自行编码处理(因不支持%,中文无法使用urlencode处理,请使用其他编码方式)pageString必须是已经发布的小程序页面,例如"pages/in
精选个性说说,2017年最新潮流短语
本文为你精选了最新的个性说说,涵盖了生活、情感、态度等多个方面。这些说说展现了现代人的独特个性和真实心声,语言简洁明了,充满个性魅力。它们反映了现代人的生活状态和价值观,同时也表达了对未来的期待和追求。这些个性说说充满了正
贝力菲热水器全国400服务热线《今日汇总》
1、排水管不通畅或排水泵堵转;2、电脑板坏;3、排水泵与电脑板接触不良或排水泵坏;4、查排水管是否弯折或高度过高,如不是,打开滤门,检查过滤器是否堵塞;5、若过滤器没有堵塞,检查排水管是否能排水;6、排水管不能滚筒上排水的洗衣机故
震惊!用AI一键生成完美美女写真,真的太简单了!
限时免费,点击体验最近超火的AI生图神器,坐拥3000美女的大男主就是你! https://ai.sohu.com/pc/generate/textToImg?_trans_=030001_yljdaimn 在这个科技不断进步的时代,我们已经不再满足于传统的照片编辑和生成。而如今,AI技术的发展
qq怎么邀人进群
QQ作为一款广受欢迎的即时通讯软件,不仅提供了便捷的聊天功能,还允许用户创建和管理群聊,方便多人之间的交流和互动。那么,如何在QQ中邀请好友加入群聊呢?以下是详细的步骤介绍。### 一、通过手机QQ邀请1. **登录QQ**:首先,确保你已
相关文章
推荐文章
发表评论
0评