您的位置:首页 > 互联网

智算中心概念股「寻找"算力王":智算中心需要怎样的AI服务器(附典型比较)」

发布时间:2024-12-28 14:55:55  来源:互联网     背景:

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较) 通信产业网|2024-11-12 09:30:15作者:胡媛来源:通信产业网

【通信产业网讯】(记者 胡媛)近两年,AI大模型给产业带来了巨大的影响,以GPU为核心的智算逐步成为算力的主要发展方向。据工信部规划,中国智能算力的占比将在2025年达到35%,年复合增长率在30%以上,这意味着智算中心将引领数据中心建设的潮流。

服务器是提供数据存储、运算等服务的高性能计算机,包含处理器、内存、硬盘和其他功能及基础硬件。2024年以来,中国智算中心建设如火如荼,也在不断推动着服务器厂商持续推出加速计算服务器新品。

运营商智算“加速跑”

阅文出了什么事

AI算力基础需求高增,国内供给显著改善。今年以来,运营商开展了大规模的智算中心建设,并开展了几次重要的算力服务器集采。

从资本开支来看,运营商加大算力相关资本开支。公开信息显示,2024年,中国移动算力领域预计投入475亿元,同比增长21.5%,占资本开支比重提升5.8个百分点至27.5%。中国电信产业数字化计划资本开支370亿元,同比增长4.1%,在云/算力计划投资180亿元。中国联通在算网数智投资方面将坚持适度超前、加快布局,但是未披露具体数额。可以看出,中国移动暂时拔得头筹,中国电信和中国联通紧随其后。

此外,财报显示,到2024年底,中国电信智算算力规模将大幅领先,中国移动次之。中国电信计划2024年智算算力提升10EFLOPS,超过21EFLOPS。中国移动2024年智算算力累计超过17EFLOPS。

从运营商积极布局智算中心来看,据不完全统计,目前,国内建成和在建的智算中心项目超500个,运营商为满足市场需求,正加快建设智算中心项目超80个,争夺政企市场。

中国移动优化全国性智算中心和边缘智算节点布局,全网智算规模达到17EFLOPS(FP16),年内将投产3个近两万卡超大规模单体智算中心和12个区域智算中心。中国电信适度超前建设智算基础设施,持续加大智算能力建设,规划并建设全国“2+3+7+X”公共智算云池,在京津冀、长三角地区建设两大万卡智算集群,西部地区打造大规模绿色智算池。中国联通布局热点集约、跨区辐射、边缘覆盖的多级算力体系,构建了“1+ N+X”全国分梯次智算资源,IDC规模超40万架,云池覆盖230多个城市。

从运营商招标项目来看,2024年4月,中国移动发布2024年至2025年新型智算中心采购招标公告,此次采购包含AI服务器7994台,成为有史以来国内最大规模的AI服务器集采。加上此前中国移动2023年至2024年新型智算中心(试验网)集采项目,12个标包对应AI训练服务器采购量总计达到2454台,中国移动这两次AI服务器集采规模合计超万台。

除了中国移动之外,其他两大运营商此前也开启了AI服务器大规模采购。中国联通在今年3月启动2024年人工智能服务器集采,其中,人工智能服务器采购总规模为2503台。中国电信在去年10月也采购了4175台AI服务器。以算力基础设施来说,在大模型产品迭代发展中,算力需求持续增长,带动AI服务器的需求居高不下。

AI服务器市场竞争激烈

在智算中心的建设中,服务器的选择至关重要,它直接关系到算力的强弱、任务的执行效率以及资源的利用率。一般来讲,智算中心的服务器主要包括训练服务器、推理服务器或训推一体服务器等三大类。

算力智库官网

算力智库估值

训练服务器主要利用大量数据对AI模型进行训练,通过调整模型参数使模型更好地拟合数据,学习数据中的特征和规律。这通常需要高性能的硬件支持,如高性能GPU或TPU(张量处理单元),以及大容量内存和高速存储设备。此类服务器的特点是适用于模型开发和训练阶段,需要强大的计算能力和长时间的稳定运行。  

推理服务器主要功能是对输入数据进行快速推理计算,生成预测结果。这通常用于实时应用场景,如自动驾驶、实时语音识别等。这类服务器特点是要求低延迟、高可靠性,通常采用低功耗的GPU或专用的推理芯片,如NVIDIA的TensorRT系列芯片,在保证推理速度的同时降低能耗和成本。

三星Galaxy s6 edge+

训推一体服务器是既能进行模型训练又能进行推理计算的服务器。它的特点是资源利用率高,可以根据实际需求灵活分配计算和存储资源。但设计和维护成本也相对较高,需要解决CPU和GPU之间的算力融合问题,以及不同任务之间的资源调度问题。

针对智算中心存在的算力融合、算力孤岛、算力低效、硬件投资与更新、网络与管理等问题,在智算中心的建设中,服务器的选择应根据实际需求进行权衡。训练服务器适用于模型开发和训练阶段,推理服务器适用于实时应用场景,而训推一体服务器则可以在两者之间实现灵活切换和资源共享。

与此同时,智算服务器与传统通用服务器最大的区别,在于算力芯片的不同。智算服务器为了保证操作系统运行,也配置了CPU。但是,为了更好地完成AI计算任务,配置了更多的GPU、NPU(神经网络处理单元)、TPU等计算芯片(4块或8块),以这些芯片输出的算力为主。

算力服务器是什么东西

除了芯片不同之外,为了充分发挥性能以及保障稳定运行,AI服务器在架构、存储、散热、拓扑等方面也进行了强化设计。例如,智算服务器的DRAM容量通常是普通服务器的8倍,NAND容量是普通服务器的3倍,甚至它的PCB电路板层数也明显多于传统服务器。

大模型发展带来了对超大规模算力、高性能存储、超大规模算力调度及管理、绿色节能等技术能力的需求。算力中心当前阶段,规模属于万卡集群、体量大,服务器采购要多型号、多厂家,配套液冷需要专业液冷供应商提供,来解决其解耦交付痛点。

骁龙8 gen2工艺确认

超聚变推出FusionPoD for AI整机柜液冷服务器,从双生态、多样性算力、绿色低碳方面全方位重构智算底座,为智算集群需求打造高密、坚实、开放平台。中兴通讯推出的新互联AI服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。新华三新发布的H3C UniServer G7系列依托面向AI的可进化架构、内生AI的操作系统和管理中枢,以及拥抱AGI的多元算力体系,为用户提供了灵活、高效、绿色的算力支持。浪潮元脑服务器NF5898G8,在AI算力方面具有强大的兼容性和卓越的性能,进一步加速算力融合创新。联想新一代Neptune海神液冷服务器,允许AI和HPC客户在不需要专门的数据中心空调的情况下运行100千瓦以上的服务器机架,98%的热量将转移到水循环中。信维全新推出的AI训推服务器H8650G5I提供不同的散热SKU,包括空气冷却和液体冷却解决方案。

对于服务器厂商而言,当其身量已不再局限于提供单一硬件产品时,而是提供综合性解决方案,这些解决方案可能包括服务器、存储、网络、安全等方面。未来,智算服务器将采用更高效的能源使用方式,实现绿色计算,并加强数据和模型的保护措施,以确保数据的安全性和隐私性。

责任编辑:胡媛


返回网站首页

本文评论
进博增“智” 联通向“新” | 上海联通智慧升级通信保障 5G+AI赋能第七届进博会【网络向新篇】
进博增“智” 联通向“新” | 上海联通智慧升级通信保障 5G+AI赋能第七届进博会【网络向新篇】 通信产业网|2024-11-05 13:00:06作者:通文来源:通信产业网【通信产业网讯】“...
日期:11-11
iPhone 13要来了!售价时间等被确认,库克使出杀手锏「iPhone 14系列首销火爆!库克深夜感慨:这一天背后是多年的努力」
9月16日,iPhone 14、iPhone 14 Pro、iPhone 14 Pro Max迎来首销,与往年iPhone开售一样,今年全国各地Apple Store门店同样排起了长队。根据博主实拍的深圳益田假日Apple Store门...
日期:09-18
T3出行:十一假期平台呼叫量同比增长90.7%
10月9日消息,T3出行大数据显示,9月29日至10月6日期间,全国用户打车出行呼叫量同比增加90.7%。从T3出行用户出行订单分布数据来看,出行订单量Top10城市分别为杭州、南京、上海、...
日期:10-09
特斯拉 智能机器人「特斯拉Optimus机器人新进展:已生产数百台、尚未达上产线工作标准」
快科技9月26日消息,据媒体报道,特斯拉人形机器人Optimus目前已经生产数百台,但还不到可以上产线工作的状态,目前只能用来采集数据、测试不同的设计方案。据悉,特斯拉CEO马斯克曾...
日期:09-26
京东发布双11战报:AI手机等成交额猛增超100%_京东双11成交额已突破千亿
11月12日 消息:根据京东黑板报公众号的数据,截至11月11日23:59,京东11.11购物节的用户数同比增长超过20%,采销直播订单量同比增长达到3.8倍。在品牌和商家方面,超过17000个品牌...
日期:11-12
HarmonyOS NEXT纯血鸿蒙先锋用户招募开启:首批支持华为Mate 60/X5系列、MatePad Pro 13.2
快科技6月21日消息,在今天的华为开发者大会上,余承东正式宣布HarmonyOS NEXT开启开发者及先锋用户Beta。余承东强调,HarmonyOS NEXT从内到外实现全栈自研,是基于OpenHarmony打造...
日期:06-21
天猫618活动最全攻略 天猫618红包首发!最高23888元!「天猫618活动红包怎么用」
618年度购物狂欢节已开启,天猫的抢红包活动也已经开始啦!红包活动是天猫618的一部分,将为消费者带来无尽惊喜和优惠。在这个大促期间,通过参与互动游戏、完成任务和抽奖等方式,...
日期:05-30
Redmi K70至尊版配色全揭晓!共三款:冰璃、墨羽、晴雪_realmex7pro redmi k30 至尊
快科技7月11日消息,王腾最新公布了Redmi K70至尊版的三款配色图片,分别是冰璃、墨羽、晴雪。其中,墨羽和晴雪都是老熟人了,是K系列一直延续下来的经典配色。iphone 12 外观不同...
日期:07-11
redmi note 10 天玑700「天玑之王预定!Redmi K70至尊版回归天玑平台:天玑9300 加持」
快科技4月15日消息,数码闲聊站爆料称,Redmi K70至尊版将回归天玑平台,搭载联发科天玑9300 旗舰处理器,并配备独显芯片,成为Redmi打造的双芯旗舰。除此之外,Redmi K70至尊版还将采...
日期:04-15
YY直播&JJ斗地主“一战成名”斗地主挑战赛收官
(原标题:YY直播&JJ斗地主“一战成名”斗地主挑战赛收官) 8月19日,随着“YY主播娱乐赛”最后一场精彩对决的圆满结束,YY直播联合...
日期:08-21
智能手机大厂集体自研操作系统,究竟为哪般?_智能手机大厂集体自研操作系统,究竟为哪般操作
文|邻章继华为鸿蒙操作系统之后,小米也官宣将推出小米澎湃OS取代MIUI,而在将于11月1日召开的vivo开发者大会日程表中,“自研操作系统发布”也赫然在列。可以说,当前国内主流智能...
日期:10-19
周鸿祎对话罗永浩什么节目「周鸿祎爆料罗永浩成立“拉黑部”:已拉黑好几万人」
快科技1月26日消息,在今天的亚布力中国企业家论坛上,360集团创始人、董事长兼CEO周鸿祎举行了成长计划公开课。美团新供给魅族pandaer15w无线充使用方法在演讲中周鸿祎透露,罗...
日期:01-26
第三届元宇宙共享大会|甘华鸣:高屋建瓴地认识Web3.0/元宇宙和区块链积分
2023 年 9 月 26 日,“趋势与未来”第三届元宇宙共享大会暨Web3. 0 链改——绿色积分资产化实践项目签约发布会及汇来购全生态3. 0 启动盛典在广东惠州金海湾成功举办。该活...
日期:10-15
办公员工普遍认为生成式AI对老板更有益而非雇员工
**划重点:**1. 余承东 车BU摩托罗拉windows系统的手机现在显卡价格还虚高吗能源巨头雪佛龙...
日期:12-05
工信部关于电动车「工信部出手限制电车能耗 以后的车会更省电吗?」
最近新能源 “ 大逃杀 ” 是愈演愈烈了。从 30 万出头的腾势 Z9 GT ,到 20.99 万的极氪 007 ,无论车企上岸与否,都卷得不太好过。不过,虽然大家都在叫苦连天,但电车已经悄...
日期:08-27
未拆封初代iPhone拍出6.3万美元 看看你家有没有_全新未拆封的iphone去哪卖
一款未拆封的2007年初代iPhone最近在拍卖会上以超过63,000美元的价格成交,成为有史以来最高的成交价。这款iPhone原价599美元,但在经过27次竞价后,最终以63356.40美元售出,达到...
日期:03-01
中国首款3A游戏!官方确认《黑神话:悟空》开发成本超3亿_黑神话悟空算不算3a
快科技10月9日消息,日前,国家税务总局杭州市税务局发布文章显示,《黑神话:悟空》开发总成本超3亿元。《黑神话:悟空》开发方杭州游科互动科技有限公司财务负责人表示,我们估算了一...
日期:10-10
360与金山之争:国际惯例还是恶意竞争?
  金山软件新任CEO张宏江将上任的第一把火烧到了宿敌360的身上。   昨日(11月3日),金山网络对外公布,一周内360蓄意通过各种渠道和方式发动对金山产品的恶意伤害,包括诱导...
日期:07-24
骁龙695加持!vivo Y78 亮相Geekbench:顶配12GB内存_vivoy67骁龙多少
据91mobiles报道,vivo Y78 手机近日出现在 Geekbench 认证页面上,型号为 vivo V2271A。该页面显示,新机采用骁龙 695 移动平台,最大可选 12GB 运行内存,预装 Android 13 操作系统...
日期:04-13
铁塔乎高「铁塔视联:一张"高瞻远瞩"的特色网」
铁塔视联:一张"高瞻远瞩"的特色网 通信产业网|2024-08-27 09:45:33作者:胡媛来源:通信产业网【通信产业网讯】(记者 胡媛)随着中国铁塔2024年中期业绩的公布,2024年上半年,两翼业务...
日期:11-02