您的位置:首页 > 互联网

中兴通讯陈新宇:新互联AI服务器,解锁智算新境界_中兴陈宇飞

发布时间:2024-10-12 16:07:16  来源:互联网     背景:

通信世界网消息(CWW)在最近举行的中国移动合作伙伴大会上,中兴通讯副总裁陈新宇展示了公司最新推出的新互联AI服务器。这款服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。

中兴通讯陈虎

以下是陈新宇与记者之间的深度对话。

中兴通讯最近推出了新互联AI服务器。首先,请您谈谈中兴通讯为什么要推出这款服务器?这对AI大模型训练有何意义?

中兴通讯陈溪简历

陈新宇:在人工智能领域,大型模型的参数规模正在以惊人的速度扩张,其增长速度呈指数级上升,这对计算能力提出了前所未有的挑战。传统的计算架构已无法满足这些不断增长的需求,尤其是在进行跨节点并行训练时,通信带宽和延迟问题变得尤为严峻。中兴通讯针对这一挑战推出了新互联AI服务器,其设计理念是通过增加单节点内GPU的数量和优化内部通信带宽,有效减轻跨节点通信的瓶颈,从而显著提高大模型训练的效率。

中兴通讯的新互联AI服务器在哪些方面实现了创新?能否详细阐述其设计理念与传统服务器的区别?

陈新宇:相比于传统服务器,我们的新互联AI服务器在计算密度和网络带宽上实现了显著创新。该AI服务器的GPU互连带宽高达800GB/s,支持高达16卡的扩展能力,相较于传统的8卡服务器,其计算能力翻倍,为大模型训练提供了强大的支持。同时,它采用模块化设计,使升级变得极为简便,客户无需更换整个服务器主机,只需将现有的8卡GPU模块替换为16卡GPU模块。此外,我们的GPU模块设计遵循OCP UBB2.0标准,确保系统的兼容性和未来的扩展性。此外,我们还提供整机柜扩展、一体化交付及智能运维等综合解决方案,旨在帮助客户提升运维效率并降低总体拥有成本。

能否为我们解释一下“新互联”技术的核心理念?它如何促进AI大模型训练效率的提升?

陈新宇:“新互联”技术的核心理念在于突破传统GPU服务器的通信限制,通过高带宽域(HBD)解决大模型训练中面临的网络带宽和时延问题。当前,国内的GPU服务器通常采用点对点Full Mesh互联架构,虽然能够提供高带宽和低延迟,但其扩展性受限,特别是在大模型训练中,最多只能支持单机8张GPU卡。为满足超大规模参数模型的训练需求,我们创新推出了OLink交换技术,实现GPU之间的高速互联。这种“新互联”技术将GPU的通信模式从点对点互联升级为交换互联,显著提升了系统的扩展性,同时有效降低了GPU之间的通信延迟。通过OLink技术,我们可以在单个节点内支持16张以上的GPU扩展,并且能够进一步扩展到机间互联,打造更大规模的高带宽域,为构建更高密度的超节点奠定了坚实的基础。

在GPU互联领域,开放标准的重要性日益凸显。您如何看待OLink技术采用开放标准对行业发展的影响?

小米信贷是小米公司的吗

陈新宇:传统的GPU互联总线协议由于封闭性,限制了不同厂商设备之间的兼容性,增加了技术升级和维护的难度。中兴通讯的OLink技术基于开放标准,促进了多厂商生态的共建,企业可以更加灵活地选择硬件设备和技术方案,提升系统扩展性和灵活性。通过OLink互联协议和大容量交换芯片,我们实现了机内及机间的统一高速互联,简化了智算集群的组网复杂度,提升了系统扩展能力和性能,使AI模型训练更加高效。开放的OLink总线协议有助于不同厂商设备的无缝接入,推动了智算领域的多样化发展,并为企业在大模型训练中提供了更高的性价比。

中兴通讯 陈宇飞

中兴通讯推出的新互联AI服务器适用于哪些行业或应用场景?

陈新宇:新互联AI服务器设计初衷是为了满足多行业对高性能AI计算的需求。它不仅适用于电信运营商,还广泛适用于互联网企业、政府机构、科研院所,以及任何需要进行大模型训练和推理的场景。在处理千卡、万卡级别的大规模集群计算任务时,新互联AI服务器能够提供强大的算力支持,满足市场对AI计算能力不断增长的需求。展望未来,我们将继续扩大超节点的规模,并推出更多基于OLink技术的创新产品,以推动AI技术的产业化和广泛应用。

通过本次采访,我们看到中兴通讯的新互联AI服务器不仅在硬件架构上实现了突破,同时在软件与工程能力方面展现出卓越的创新潜力。中兴通讯正以其创新的技术实力,为AI的未来开辟新的道路。随着技术的持续进步和市场的日益成熟,新互联AI服务器将解锁智算新境界,为各行各业带来更高效、更智能的智算体验,推动AI技术向更深层次的应用发展,加速数智化转型的步伐。


返回网站首页

本文评论
齐向东:构建一体化安全体系,打造工业互联网安全新模式
通信世界网消息(CWW)近日,2024全球工业互联网大会在辽宁沈阳举行。本次大会以“以智焕制 以旧焕新”为主题,汇聚了产学研多方力量共同探讨工业互联网发展趋势。美团点评业务覆盖...
日期:09-19
微信广告可直跳淘宝天猫,双11前阿里腾讯再携手_微信广告商品是正品吗?
今年双11,淘宝、天猫商家迎来重磅流量红利。 9月25日,阿里妈妈与腾讯广告进一步深化合作:微信视频号、朋友圈、小程序等优质广告流量通过阿里妈妈UD效果投放,可直跳淘宝、天猫商...
日期:09-26
「神U、屏幕、发热控制、拍照均优秀 「米粉评价Redmi」-K60至尊版」_红米k60屏幕多大
来源:中关村在线三体动画最新消息近日,一位米粉对Redmi K60至尊版的评价引起了人们的关注。他表示,这款手机的屏幕、流畅度、发热控制以及拍照表现都非常出色,而其价格也非常合...
日期:09-18
华为云持续引领云原生 加速混合云、AI、边缘计算落地(华为云发展)
  近年来,以容器为核心的云原生技术经过近年的快速发展,各企业在云原生方面的投资在逐步增长,数字化转型的云原生时代已经来临。国际知名市场咨询机构Gartner在公有云报...
日期:02-17
红狮金鱼图片「红狮金业:最高贵的贵金属之一铂金」
众多贵金属类投资产品中,除了黄金、白银这两种大家熟知的产品外,其实还有很多贵金属产品在市场上被交易,本期红狮金业为大家介绍最高贵的贵金属之一铂金。一、铂金的价值铂金(Pl...
日期:04-23
Sora无法替代人类!亚马逊工程师断言:实际工作冲突不可能靠AI解决
声明:本文来自于微信公众号 新智元(ID:AI_era),作者:新智元,授权转载发布。【新智元导读】Sora一出,让很多人心生恐惧:饭碗彻底被砸了!这位亚马逊工程师却告诉我们:真的不必担心...
日期:02-27
405g塞进AMD 7840U!AYANEO AIR 1S正式发布:4699元起_amd trinity apu a4-5300b
快科技7月9日消息,今天,AYANEO官方宣布,主打轻薄性能的AYANEO AIR 1S掌机正式发布。扩展安全更新esu五部门印发虚拟现实与行业应用融合发展行动计划方案据悉,AYANEO AIR 1S的重...
日期:07-10
欧琳橱柜董事长_欧琳橱柜,致力于成为新生活方式的引领者
  八月初的一个傍晚,暑气还未褪去。人们或行驶在归家的路上,或在厨房里为晚餐忙碌。欧琳集团总部橱柜仓储车间,欧琳海外配送部的员工们却依然忙得热火朝天。在这里,有一大批...
日期:12-04
极限套娃:CDPR将GOG送上Epic游戏商城
你是否想象过Google Play上架App STore的场景?现在,PC游戏平台就出现了这样一出堪称极限套娃”的事情。今天,Epic官方账号宣布,《赛博朋克2077》的开发商CD Projekt旗下的游戏平...
日期:10-28
汇丰用1英镑收购硅谷银行英国子公司 有形股本约为14亿英镑「英国汇丰银行大楼为何转让」
汇丰银行于3月13日下午表示,已以1英镑的价格收购了硅谷银行在英国的子公司,并且该交易已经完成。硅谷银行在英国的子公司的有形股本约为14亿英镑。此次收购交易将使用现有资源...
日期:03-13
全球液晶市场萎缩  破局者现身助力Mini LED逆势增长_液晶屏市场
根据图洛科技(RUNTO)发布的《全球电视面板市场出货月度追踪》, 2024 年 7 月全球大尺寸液晶电视面板出货量为18.8M片,同比下降8.5%,环比下降6.2%;出货面积为13.6M平方米,同比下降7....
日期:09-14
日本载367人客机撞机后迫降爆燃!滑行中瞬间炸成火球_日本客机事故
快科技1月2日消息,据央视新闻客户端报道,当地时间1月2日,日本东京羽田机场跑道发生火灾,一架日本航空飞机起火。另据日本电视台(NTV)2日最新报道称,在东京羽田机场起火的日本航空飞...
日期:01-02
蔚来有nio系统吗「蔚来手机 NIO Phone 2入网:支持100W有线闪充」
7月18日 消息:蔚来公司即将推出其高端旗舰手机NIO Phone2,该设备已获得认证,由蓝思科技代工生产,并支持100W有线闪充。这款手机的型号为N2401。苹果iphone14预售系统问题NIO Ph...
日期:07-18
获赔185万元 格力电器诉小米米家电风扇侵权一案胜诉_格力风扇好还是小米风扇好
【】7月10日消息,格力和小米这对“冤家”又有了新的动态。2018年春晚合作伙伴据“格力文传”(珠海格力电器股份有限公司文化传媒中心)官方微博介绍,针对小米官方旗舰店所售米家...
日期:07-10
万网 慧聪网_万网发布针对停止慧聪网域名服务的声明
  4月22日消息。今天上午,就昨日万网停止慧聪网域名服务事件,万网向ITBEAR科技资讯发来声明。   以下为万网声明全文:   近日有公司通过媒体和网络对万网暂停其域名服务...
日期:07-27
ChatGPT在县城,时髦年轻人已经用它吊打同事了
ChatGPT已经在国内火了一个多月了,这个让AI巨头神仙打架的智能对话机器人到底火到了什么程度?看看中国的底色——县城就知道了。在县城,走在信息前沿的年轻人,已经开始用ChatGPT...
日期:03-05
今日AI:全球最强开源模型一夜易主;清明节前AI复活亲人成热门生意;Heygen 数字人连动作姿态都能复制了;大模型一口气可调用数百万个API
欢迎来到【今日AI】栏目!这里是你每天探索人工智能世界的指南,每天我们为你呈现AI领域的热点内容,聚焦开发者,助你洞悉技术趋势、了解创新AI产品应用。新鲜AI产品点击了解:https...
日期:03-28
中国空间站"太空菜园"画面公开!一片欣欣向荣_中国太空空间站正式开放
太空种菜,挑战无限!中国载人航天工程最新消息显示,神舟十八号飞船的宇航员叶光富、李聪、李广苏已在太空驻留逾4个月。l标志的车是什么从公开的画面中可见,宇航员在空间站内开展...
日期:08-30
下个月工资里或将增加这笔收入 网友:这不是应该的吗_下月工资有这些变化
2 月份,许多人期待着工资卡里可能多出一笔钱。这种额外的收入可能有多种来源,让我们一起揭开这笔神秘资金的来龙去脉。一、年终奖金年终奖金是许多公司在年底给予员工的一项福...
日期:01-29
百度智能云提供计算服务「改为闭门沟通会-百度智能云否认文心一言发布会取消」
按照百度官方此前消息,将会在今天下午2点召开新品发布会,正式发布文心一言云服务及应用产品。但今天上午突然有业内传闻称,该发布会已取消,“将延期几天再对外发布”。ai互联网...
日期:10-05