英特尔全新Gaudi2处理器面世中国市场,加速大规模深度学习训练与推理
中关村在线消息,2023年7月11日,英特尔AI产品战略暨Gaudi2新品发布会在京举行。会上,英特尔正式于中国市场推出第二代Gaudi深度学习加速器——Habana Gaudi2。作为英特尔从云到端产品组合的重要组成,Gaudi2致力于以领先的性价比优势,加速AI训练及推理,为中国用户提供更高的深度学习性能和效率,从而成为大规模部署AI的更优解。
英特尔于中国市场推出Gaudi2深度学习加速器
(资料图片仅供参考)
英特尔执行副总裁兼数据中心与人工智能事业部总经理Sandra Rivera指出,“英特尔致力于通过为客户提供广泛的硬件选择,并支持开放的软件环境,加速人工智能技术的发展。凭借包括至强可扩展处理器和Gaudi2深度学习加速器在内的产品组合,英特尔正在降低人工智能的准入门槛,并强化客户在云端通过网络和智能边缘部署这一关键业务技术的能力,从而帮助构建中国人工智能的未来。”
为深度学习而生的全新Gaudi2训练加速器
该Gaudi2深度学习加速器暨Gaudi2夹层卡HL-225B,以第一代Gaudi高性能架构为基础,以多方位性能与能效比提升,加速高性能大语言模型运行。该加速器具备:
●24个可编程Tensor处理器核心(TPCs)
●21个Gbps(RoCEv2)以太网接口
●96GB HBM2E内存容量
●2.4TB/秒的总内存带宽
●48MB片上SRAM
●集成多媒体处理引擎
Habana Gaudi 2深度学习加速器
Gaudi2加速器的出色性能在6月公布的MLCommons MLPerf基准测试中得到了充分认证,其在GPT-3模型、计算机视觉模型ResNet-50(使用8个加速器)、Unet3D(使用8个加速器),以及自然语言处理模型BERT(使用8个和64个加速器)上均取得了优异的训练结果。与市场上其他面向大规模生成式AI和大语言模型的产品相比,Gaudi2拥有卓越的性能与领先的性价比优势,能够帮助用户提升运营效率的同时,降低运营成本。
此外,Gaudi2可为大规模的多模态和语言模型提供出色的推理性能。在最近的Hugging Face评估中,其在大规模推理方面的表现,包括在运行Stable Diffusion(另一个用于从文本生成图像的最先进生成式AI模型之一)、70亿以及1760亿参数BLOOMz模型时,在行业内保持领先。
满足大语言和多模态模型的需求
Gaudi2深度学习加速器的架构旨在高效扩展,以满足大规模语言模型及生成式AI模型的需求。其每张芯片集成了21个专用于内部互联的100Gbps(RoCEv2 RDMA)以太网接口,从而实现低延迟服务器内扩展。
在Stable Diffusion训练上,Gaudi2展示了从1张卡至64张卡近线性99%的扩展性。此外,MLCommons刚刚公布的MLPerf训练3.0结果,亦验证了Gaudi2处理器在1750亿参数的GPT-3模型上,从256个加速器到384个加速器可实现令人印象深刻的接近线性的95%扩展效果。
具备成熟的软件支持,Gaudi2产品在中国市场正式上市
伴随日益增长的生成式AI及大语言模型需求,英特尔亦致力于打造领先、成熟的软件支持,充分释放Gaudi2深度学习加速器性能。
为支持客户轻松构建模型,或将当前基于GPU的模型业务和系统迁移到基于全新Gaudi2服务器,并帮助保护软件开发投入,SynapseAI软件套件针对Gaudi平台深度学习业务进行了优化,旨在与广泛的软件生态系统一起,帮助简化模型的开发和迁移。SynapseAI集成了对TensorFlow和PyTorch框架的支持,并提供众多流行的计算机视觉和自然语言参考模型,能够满足深度学习开发者的多样化需求。
目前,英特尔正与浪潮信息合作,打造并发售基于Gaudi2深度学习加速器的浪潮信息AI服务器NF5698G7。该服务器集成了8颗Gaudi2加速卡HL-225B,还包含双路第四代英特尔至强可扩展处理器。
基于Gaudi2加速器的浪潮NF5698G7服务器
携手中国产业生态,共启人工智能新篇
多年来,借助强大的AI软硬件基础,英特尔一直致力于为AI领域的各类工作负载提供业界领先的卓越性能,并通过开放的生态、丰富多样的产品选择不断降低AI部署的门槛,并为中国的AI发展提供坚定支持。
本次发布会上,美团、百度与浪潮信息等生态伙伴分别分享了其基于英特尔软硬件产品组合的多样化智能业务进展。百度智能云服务器高级经理何永占表示,集成英特尔AMX加速引擎的第四代英特尔至强可扩展处理器为ERNIE-Tiny模型带来了多倍的性能优化,百度将持续构建领先的AI全栈能力和全面的开放生态,并期待与英特尔在未来的AI领域展开更为广泛、深入的合作。浪潮信息高级产品经理王磊强调,NF5698G7是专为面向生成式AI市场创新开发的新一代AI服务器,支持8颗OAM高速互联的Gaudi2加速器,具备高性能、高扩展、高能效和开放生态等优点,将为AI客户提供强大的大模型训练和推理能力。未来,浪潮信息将继续携手英特尔,为行业打造创新、领先的产品方案。
此外,多家本土生态伙伴亦表明了与英特尔在当下及未来产品合作上的坚定立场与长远展望。新华三集团计算存储产品线副总裁刘宏程指出,新华三智慧计算秉持内生智能的技术理念,基于硬件使能、前瞻技术、绿色低碳等全方位能力,助力AI产业的高速发展。基于英特尔Gaudi2AI加速器,新华三正与英特尔紧密合作,开发适合大模型训练和推理的高性能AI服务器,推动智能算力的普惠创新。与此同时,超聚变数字技术有限公司算力基础设施领域总裁唐启明表示,非常荣幸见证英特尔Gaudi2的发布。作为英特尔的长期战略合作伙伴,超聚变将一如既往地携手英特尔,共同推出基于Gaudi2的全新产品与解决方案,助力企业的AI场景成熟商用和规模落地。
未来,英特尔将持续引领产品技术发展,进一步加速大规模深度学习部署,助力中国本地AI市场发展。
英特尔(Intel) i5-13600KF 13代 酷睿 处理器 14核20线程 睿频至高可达5.1Ghz 24M三级缓存 台式机CPU
进入购买
标签:
相关推荐:
最新新闻:
- 英特尔全新Gaudi2处理器面世中国市场,加速大规模深度学习训练与推理
- 济宁:织密兜牢民生保障网
- 实测中兴晴天墙面路由器,颜值性能全方位在线
- 湖北阳新:这个“二维码”不一般,群众有问题可扫码反映!
- 技校一天上课几个小时
- 时代光影 百部川扬|《是怎样的一群人 让成都速度更快一步》
- 抓紧做实粤港澳大湾区建设的大机遇、大文章(高质量发展调研行)
- 国外调查数据:近九成经典复古游戏并没有合法途径游玩
- 酷比魔方掌玩 mini 安卓通话平板上架:联发科 G99,售价 799 元
- 2023年7月11日异丙醚价格最新行情预测
- 售价1.19万!特斯拉"纯电越野玩具车"国内将上市
- 卡梅隆透露《阿丽塔:战斗天使》会有续集 或不止一部
- 全国,又多了2个“米”字形高铁枢纽
- 非经营性占用公司资金等触及违规 申科股份及实控人等收深交所监管函
- 央行:上半年人民币贷款增加15.73万亿元
- 国内首个“车内无人”商业化试点牌照将发放 上市公司自动驾驶赛道布局如何
- Steam周销榜:《潜水员戴夫》第二 《老头环》紧随
- 618期间中国手机销量下降8%:华为增速最快 苹果用户转投数增加
- 广州南沙第三季度54个重大项目开工竣工 总投资超1300亿元
- OLED供货紧张 京东方或包揽iPhone SE4屏幕
- 天津出台措施加快推进充电基础设施建设
- 抖音起诉虎牙侵权 抖音因侵权纠纷起诉虎牙
- 联想扫描王 App 上线:纸质文件变电子档,PC 端、移动端均可使用
- 配售结果 | Keep(03650)一手中签率40.03% 最终定价28.92港元
- 暑期爽玩3A大作!华硕RTX4060显卡助你酷玩一夏
- 红米Note 13双升级:塑料支架砍掉了!
- 荣耀平板MagicPad发布倒计时1天 打造万元以内影音办公最强平板
- 甘肃甘南强降雨导致泥石流灾害,已致2人死亡2人失联
- 小米MIX Fold 3敲定8月发!CPU直接拉满
- 市场日报 | 新能源车狂掀涨停!龙头股暴涨,半导体回暖,存储芯片方向走强;光伏板块震荡下挫
- 四川省发布今年首个暴雨黄色预警
- 一甲基二氯氢硅烷商品报价动态(2023-07-11)
- 大宗交易的股票多久可以卖出?出现大宗交易意味着什么?
- 清算?EDG起诉Scout合同纠纷 7月20日开庭
- 特斯拉儿童越野摩托车Cyberquad国内将上市 消息称售价11990元
- 有人花巨额资金买动视暴雪股票:坐等微软收购成功
- 三祥科技接待西南证券等多家机构调研
- 拼多多商品标题优化的正确方式 标题中滥用品牌名称的商品是
- 冠农股份2023年上半年预计净利4.4亿-4.8亿同比增长67.66%到82.89%
- 女子带娃就诊输液管内发现毛发 卫生监督所回应
- 理柏:2023年股债双赢?如何在美联储紧缩后寻找增长型股票
- 住房城乡建设部明确城市更新底线要求 “留改拆”并举
- 阅读App暗藏陷阱 用户质疑充值700看不完一部网文
- 疯狂吸粉!皇家马德里新援居莱尔的互联网社交媒体粉...
- 2023年7月12日明天添喜添财 运气飙升数 钱数到手抽筋的生肖
- 南方精工今日涨4.31% 二机构净卖出1879.64万元
- 恒生指数收涨0.97% 恒生科技指数涨1.47%
- 锐龙5 7500F将发布:频率降低了100MHz
- “梦想”号邮轮靠泊天津国际邮轮母港
- 特斯拉发布Cyberquad儿童玩具电动车 售价可达11990元
- 达摩院进军农业赛道?招聘信息曝光,瞄准智慧育种
- 南京一动物园推出“钓鳄鱼”项目 网友直呼太危险
- 英国《超级马力欧兄弟大电影》放映惊现不雅片段 警方现已介入调查
- 独游大会《BitSummit》SIE展区公开 吉田修平亲自出席
- 胡锡进:7月11日新增账面盈利1126元 股民和股市应该对国家经济政策产生更大影响力
- 2023全球电竞大会定于7月28日在上海举办
- 【竞猜有奖】大连热电明日能否实现6连板?
- 车子太阳暴晒(车子晒太阳有什么影响)
- 全国总工会:努力实现2023年底全国服务站点达到15万个
- 深圳大鹏瑞得福国际学校(深圳大鹏瑞得福国际学校和呗赛思学校相比有什么区别)
- 索尼PS新专利:高玩在线陪你玩游戏
- 领克09EM-P成为夏季达沃斯论坛官方政要接待用车,真是泰!裤!辣!
- 黑袍纠察队官方:祖国人角色将加入《真人快打1》游戏
- 水滴筹筹款页面升级,新增银行打款对账单明细,筹款人和捐款人都能看
- 死侍3片场视频曝光 瑞恩·雷诺兹处于下风
- 重制《生化危机:代号维罗妮卡》曝光 官方称正讨论系列扩展
- 图拉斯挂脖空调纪录片:5年时间,终于把空调戴出门
- 让孩子们在科学课上都有新发现
- 积极应对高温 做好迎峰度夏电力保供
- 白电油商品报价动态(2023-07-11)
- 岩土的物理性质有哪些(水有哪些主要的物理性质)
- AIGC站上高薪风口:新发职位平均年薪超40万,35岁不再是招聘红线?
- 天气不正常?气象专家权威解读来了!
- 探索 BLACKVIEW ACTIVE 8 PRO 坚固型平板电脑的终极耐用性
- 满地科技股份午盘持续上扬 股价现涨近14%