您的位置:首页 > 互联网

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较)_算力中心怎么挣钱

发布时间:2024-12-26 15:13:54  来源:互联网     背景:

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较) 通信产业网|2024-11-12 09:30:15作者:胡媛来源:通信产业网

【通信产业网讯】(记者 胡媛)近两年,AI大模型给产业带来了巨大的影响,以GPU为核心的智算逐步成为算力的主要发展方向。据工信部规划,中国智能算力的占比将在2025年达到35%,年复合增长率在30%以上,这意味着智算中心将引领数据中心建设的潮流。

服务器是提供数据存储、运算等服务的高性能计算机,包含处理器、内存、硬盘和其他功能及基础硬件。2024年以来,中国智算中心建设如火如荼,也在不断推动着服务器厂商持续推出加速计算服务器新品。

运营商智算“加速跑”

AI算力基础需求高增,国内供给显著改善。今年以来,运营商开展了大规模的智算中心建设,并开展了几次重要的算力服务器集采。

从资本开支来看,运营商加大算力相关资本开支。公开信息显示,2024年,中国移动算力领域预计投入475亿元,同比增长21.5%,占资本开支比重提升5.8个百分点至27.5%。中国电信产业数字化计划资本开支370亿元,同比增长4.1%,在云/算力计划投资180亿元。中国联通在算网数智投资方面将坚持适度超前、加快布局,但是未披露具体数额。可以看出,中国移动暂时拔得头筹,中国电信和中国联通紧随其后。

此外,财报显示,到2024年底,中国电信智算算力规模将大幅领先,中国移动次之。中国电信计划2024年智算算力提升10EFLOPS,超过21EFLOPS。中国移动2024年智算算力累计超过17EFLOPS。

从运营商积极布局智算中心来看,据不完全统计,目前,国内建成和在建的智算中心项目超500个,运营商为满足市场需求,正加快建设智算中心项目超80个,争夺政企市场。

中国移动优化全国性智算中心和边缘智算节点布局,全网智算规模达到17EFLOPS(FP16),年内将投产3个近两万卡超大规模单体智算中心和12个区域智算中心。中国电信适度超前建设智算基础设施,持续加大智算能力建设,规划并建设全国“2+3+7+X”公共智算云池,在京津冀、长三角地区建设两大万卡智算集群,西部地区打造大规模绿色智算池。中国联通布局热点集约、跨区辐射、边缘覆盖的多级算力体系,构建了“1+ N+X”全国分梯次智算资源,IDC规模超40万架,云池覆盖230多个城市。

从运营商招标项目来看,2024年4月,中国移动发布2024年至2025年新型智算中心采购招标公告,此次采购包含AI服务器7994台,成为有史以来国内最大规模的AI服务器集采。加上此前中国移动2023年至2024年新型智算中心(试验网)集采项目,12个标包对应AI训练服务器采购量总计达到2454台,中国移动这两次AI服务器集采规模合计超万台。

除了中国移动之外,其他两大运营商此前也开启了AI服务器大规模采购。中国联通在今年3月启动2024年人工智能服务器集采,其中,人工智能服务器采购总规模为2503台。中国电信在去年10月也采购了4175台AI服务器。以算力基础设施来说,在大模型产品迭代发展中,算力需求持续增长,带动AI服务器的需求居高不下。

AI服务器市场竞争激烈

在智算中心的建设中,服务器的选择至关重要,它直接关系到算力的强弱、任务的执行效率以及资源的利用率。一般来讲,智算中心的服务器主要包括训练服务器、推理服务器或训推一体服务器等三大类。

训练服务器主要利用大量数据对AI模型进行训练,通过调整模型参数使模型更好地拟合数据,学习数据中的特征和规律。这通常需要高性能的硬件支持,如高性能GPU或TPU(张量处理单元),以及大容量内存和高速存储设备。此类服务器的特点是适用于模型开发和训练阶段,需要强大的计算能力和长时间的稳定运行。  

算力智库估值

推理服务器主要功能是对输入数据进行快速推理计算,生成预测结果。这通常用于实时应用场景,如自动驾驶、实时语音识别等。这类服务器特点是要求低延迟、高可靠性,通常采用低功耗的GPU或专用的推理芯片,如NVIDIA的TensorRT系列芯片,在保证推理速度的同时降低能耗和成本。

训推一体服务器是既能进行模型训练又能进行推理计算的服务器。它的特点是资源利用率高,可以根据实际需求灵活分配计算和存储资源。但设计和维护成本也相对较高,需要解决CPU和GPU之间的算力融合问题,以及不同任务之间的资源调度问题。

小米集团回购120亿

针对智算中心存在的算力融合、算力孤岛、算力低效、硬件投资与更新、网络与管理等问题,在智算中心的建设中,服务器的选择应根据实际需求进行权衡。训练服务器适用于模型开发和训练阶段,推理服务器适用于实时应用场景,而训推一体服务器则可以在两者之间实现灵活切换和资源共享。

与此同时,智算服务器与传统通用服务器最大的区别,在于算力芯片的不同。智算服务器为了保证操作系统运行,也配置了CPU。但是,为了更好地完成AI计算任务,配置了更多的GPU、NPU(神经网络处理单元)、TPU等计算芯片(4块或8块),以这些芯片输出的算力为主。

除了芯片不同之外,为了充分发挥性能以及保障稳定运行,AI服务器在架构、存储、散热、拓扑等方面也进行了强化设计。例如,智算服务器的DRAM容量通常是普通服务器的8倍,NAND容量是普通服务器的3倍,甚至它的PCB电路板层数也明显多于传统服务器。

大模型发展带来了对超大规模算力、高性能存储、超大规模算力调度及管理、绿色节能等技术能力的需求。算力中心当前阶段,规模属于万卡集群、体量大,服务器采购要多型号、多厂家,配套液冷需要专业液冷供应商提供,来解决其解耦交付痛点。

超聚变推出FusionPoD for AI整机柜液冷服务器,从双生态、多样性算力、绿色低碳方面全方位重构智算底座,为智算集群需求打造高密、坚实、开放平台。中兴通讯推出的新互联AI服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。新华三新发布的H3C UniServer G7系列依托面向AI的可进化架构、内生AI的操作系统和管理中枢,以及拥抱AGI的多元算力体系,为用户提供了灵活、高效、绿色的算力支持。浪潮元脑服务器NF5898G8,在AI算力方面具有强大的兼容性和卓越的性能,进一步加速算力融合创新。联想新一代Neptune海神液冷服务器,允许AI和HPC客户在不需要专门的数据中心空调的情况下运行100千瓦以上的服务器机架,98%的热量将转移到水循环中。信维全新推出的AI训推服务器H8650G5I提供不同的散热SKU,包括空气冷却和液体冷却解决方案。

对于服务器厂商而言,当其身量已不再局限于提供单一硬件产品时,而是提供综合性解决方案,这些解决方案可能包括服务器、存储、网络、安全等方面。未来,智算服务器将采用更高效的能源使用方式,实现绿色计算,并加强数据和模型的保护措施,以确保数据的安全性和隐私性。

华为云发布会直播

责任编辑:胡媛


返回网站首页

本文评论
惊艳!华为P60概念图曝光_华为p60百度百科
近日,数码博主@RODENT950在国外社交平台上曝光了两张华为P60的概念图,图片显示背部设计和P50基本一致,令人意外的是,概念图显示P60似乎配备的类似iPhone14Pro系列的灵动岛式药丸...
日期:10-09
越级影像旗舰!真我11系列定档5月10日_真我v11性价比怎样好用吗
快科技4月26日消息,真我11系列今日官宣,将于5月10日16点正式登场,Slogan为越级影像旗舰”。据悉,这次真我11系列共有三款机型,分别为真我11、真我11Pro与真我11Pro ,后两款机型已...
日期:04-26
中国电信霍晓莉:骨干网400G建设宜根据实际需求及产业链成熟度逐步推进
通信世界网消息(CWW)11月9日,400G/800G与全光网发展研讨会在北京举办,中国电信研究院传输网络研究中心总监霍晓莉表示,骨干网400G即将迎来规模商用周期。综合考虑容量,传输距离,网...
日期:11-12
比亚迪进军硬派越野,这回掏出来的DMO能行吗?
高产似那啥。。。比亚迪又双叒叕开发布会了!没错,这次是比亚迪的全新子品牌方程豹,网友亲切地称它为 “ 井牌 ” ,别问为什么,把你的手机放远一点。。。不得不说,最近这几年比亚迪...
日期:08-23
“蛋仔守护月”专注未成年人反诈教育,蛋仔派对建设安全网络空间
作为一款广受低龄玩家群体欢迎的国民级手游,《蛋仔派对》不仅为未成年用户提供了丰富多彩的游戏内容,更积极承担起保护未成年人网络安全的重任。为了进一步加强未成年人的反诈...
日期:04-22
全球首款骁龙8 Gen3真全面屏来了!努比亚首发:彻底消灭挖孔、刘海
快科技10月25日消息,努比亚宣布新旗舰首批搭载骁龙8Gen3移动平台,敬请期待。此前博主数码闲聊站透露,努比亚骁龙8Gen3旗舰采用了屏下摄像头技术,这意味着新机将会是行业内第一款...
日期:10-26
电影《夺冠》首映礼引人泪目,下一站疑似苏宁总部(夺冠首映礼完整版)
  一直以来,女排精神都是国人引以为傲的,它不仅代表着中国姑娘们必胜的决心,更代表着中华民族愈挫愈勇的民族精神。   1月19日晚,电影《夺冠》正式开启首映礼,主创陈可辛、...
日期:09-26
apple vision「苹果Vision Pro国行将于6月28日发售 售价29999元起」
6月11日 消息:苹果今日正式宣布,Apple Vision Pro头显将于6月28日在中国大陆市场正式开售,起售价定为29999元。这款全新的增强现实设备承载着苹果对于未来十年取代iPhone的宏...
日期:06-11
聚焦上海2020数字金融峰会,解读金融科技新生态_中国数字金融峰会
  我们处在变革的时代,科技发展日新月异,争锋仅在毫厘之间。如何迅速适应环境,推动产业革新是每个行业亟待解决的问题,金融行业尤为重要。   在后疫情时代下,传统金融机构如...
日期:07-14
最高13860元!长安深蓝发布新能源国补退坡补贴方案「长安新能源增购补贴」
根据国家新能源汽车政策规定,2022年新能源汽车购置补贴政策将于2022年12月31日终止。周鸿祎称每台电脑上都有360 新闻11月27日,长安深蓝官方发布国补退坡补贴方案。为了回馈消...
日期:11-29
灵动soho「iPhone 16高清大图出炉:“灵动岛版”iPhone X」
快科技4月8日消息,根据yankodesign基于iPhone 16系列模具绘制的渲染图显示,iPhone 16标准版可以被看作是iPhone X灵动岛版”。凡客诚品充100返100二者摄像头排列方式相似,主要...
日期:04-08
落地为王,「大模型」走出发布会
声明:本文来自于微信公众号 深响(ID:deep-echo),作者:吕玥 亚澜,授权转载发布。大模型,大机遇。舆论喧嚣了几个月,有能力的企业都在抢占生态位。芯片层,英伟达凭借其GPU优势,成为Cha...
日期:04-21
顶尖AI技术将首次出海 阿里云在5个国家投资新建数据中心_阿里云计算全球排名
【】5月23日消息,阿里云宣布将在全球五个国家投资新建数据中心,分别位于韩国、马来西亚、菲律宾、泰国和墨西哥。据悉,新一轮海外基础设施将重点布局AI基础设施,冲刺更大规模全...
日期:05-24
全网最低价,“逼疯”买家和卖家_全网最低价是什么意思
声明:本文来自于微信公众号定焦(dingjiaoone),作者:唐亚华,授权转载发布。今年双11,各电商平台拿出的法宝是:全网最低价。前不久,京东和海氏以及李佳琦之间的纠纷又让这一话题到达...
日期:11-01
微软同意向索尼提供《使命召唤》的授权将涵盖PlayStation Plus订阅服务
12月14日消息:据IGN报道,微软最近一直在做出一些重大承诺,以使得监管机构允许其以690亿美元收购动视暴雪公司。微软之前公开宣称,已经向索尼提议达成10亿美元的交易,以便《使命...
日期:12-14
31省份平均工资:京沪居民人均可支配收入超7万元、非私营超19万「2008年上海人均可支配收入」
近日,国家统计局数据显示,2021年,全国居民人均可支配收入35128元,比2012年的16510元增加18618元,累计名义增长112.8%,年均名义增长8.8%,扣除价格因素,累计实际增长78.0%,年均实际增长...
日期:11-30
网宿科技提出以零信任理念保护个人信息安全
通信世界网消息(CWW)7月11日,由中国互联网协会主办的2024(第二十三届)中国互联网大会在北京圆满落幕。大会以“互联三十载 智汇新质变”为主题,分享互联网领域最新动态、展示前沿...
日期:07-11
马斯克的"读脑"设备首次植入人体,科学家期待什么?担忧什么?
2月4日消息,埃隆·马斯克(Elon Musk)创建的Neuralink旨在改变我们对脑机接口的认知,让科幻变成了现实。1月29日发布的消息中,马斯克宣布Neuralink已成功将其“读脑”设备首次植入...
日期:02-08
碎屏保一年能保几次「碎屏保买一送一碎屏宝买一年送一年 vivo,Y200系列1099元起售」
来源:中关村在线5月20日,vivo举行vivo Y200系列新品发布会。vivo表示Y系列已经累计3亿用户,vivo也已经连续取得过去3年2500价位段以下销量第一的成绩。此次Y200家族要掀起续航...
日期:05-20
丰田研究所推出生成式AI工具,帮助设计汽车外形「丰田人工智能叫什么」
6月25日 消息:丰田研究所(Toyota Research Institute,简称TRI)推出了一款创新的生成式人工智能(AI)工具,旨在提升车辆设计师的创作过程。该工具通过文本提示,使设计师能够生成设...
日期:06-25