您的位置:首页 > 互联网

智算中心概念股「寻找"算力王":智算中心需要怎样的AI服务器(附典型比较)」

发布时间:2024-12-27 04:13:08  来源:互联网     背景:

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较) 通信产业网|2024-11-12 09:30:15作者:胡媛来源:通信产业网

【通信产业网讯】(记者 胡媛)近两年,AI大模型给产业带来了巨大的影响,以GPU为核心的智算逐步成为算力的主要发展方向。据工信部规划,中国智能算力的占比将在2025年达到35%,年复合增长率在30%以上,这意味着智算中心将引领数据中心建设的潮流。

服务器是提供数据存储、运算等服务的高性能计算机,包含处理器、内存、硬盘和其他功能及基础硬件。2024年以来,中国智算中心建设如火如荼,也在不断推动着服务器厂商持续推出加速计算服务器新品。

运营商智算“加速跑”

AI算力基础需求高增,国内供给显著改善。今年以来,运营商开展了大规模的智算中心建设,并开展了几次重要的算力服务器集采。

女子从10楼跳下

从资本开支来看,运营商加大算力相关资本开支。公开信息显示,2024年,中国移动算力领域预计投入475亿元,同比增长21.5%,占资本开支比重提升5.8个百分点至27.5%。中国电信产业数字化计划资本开支370亿元,同比增长4.1%,在云/算力计划投资180亿元。中国联通在算网数智投资方面将坚持适度超前、加快布局,但是未披露具体数额。可以看出,中国移动暂时拔得头筹,中国电信和中国联通紧随其后。

算力中心怎么挣钱

脸书还有什么

此外,财报显示,到2024年底,中国电信智算算力规模将大幅领先,中国移动次之。中国电信计划2024年智算算力提升10EFLOPS,超过21EFLOPS。中国移动2024年智算算力累计超过17EFLOPS。

从运营商积极布局智算中心来看,据不完全统计,目前,国内建成和在建的智算中心项目超500个,运营商为满足市场需求,正加快建设智算中心项目超80个,争夺政企市场。

中国移动优化全国性智算中心和边缘智算节点布局,全网智算规模达到17EFLOPS(FP16),年内将投产3个近两万卡超大规模单体智算中心和12个区域智算中心。中国电信适度超前建设智算基础设施,持续加大智算能力建设,规划并建设全国“2+3+7+X”公共智算云池,在京津冀、长三角地区建设两大万卡智算集群,西部地区打造大规模绿色智算池。中国联通布局热点集约、跨区辐射、边缘覆盖的多级算力体系,构建了“1+ N+X”全国分梯次智算资源,IDC规模超40万架,云池覆盖230多个城市。

从运营商招标项目来看,2024年4月,中国移动发布2024年至2025年新型智算中心采购招标公告,此次采购包含AI服务器7994台,成为有史以来国内最大规模的AI服务器集采。加上此前中国移动2023年至2024年新型智算中心(试验网)集采项目,12个标包对应AI训练服务器采购量总计达到2454台,中国移动这两次AI服务器集采规模合计超万台。

除了中国移动之外,其他两大运营商此前也开启了AI服务器大规模采购。中国联通在今年3月启动2024年人工智能服务器集采,其中,人工智能服务器采购总规模为2503台。中国电信在去年10月也采购了4175台AI服务器。以算力基础设施来说,在大模型产品迭代发展中,算力需求持续增长,带动AI服务器的需求居高不下。

快看|腾讯音乐Q2财报:总营收69.3亿元

AI服务器市场竞争激烈

在智算中心的建设中,服务器的选择至关重要,它直接关系到算力的强弱、任务的执行效率以及资源的利用率。一般来讲,智算中心的服务器主要包括训练服务器、推理服务器或训推一体服务器等三大类。

训练服务器主要利用大量数据对AI模型进行训练,通过调整模型参数使模型更好地拟合数据,学习数据中的特征和规律。这通常需要高性能的硬件支持,如高性能GPU或TPU(张量处理单元),以及大容量内存和高速存储设备。此类服务器的特点是适用于模型开发和训练阶段,需要强大的计算能力和长时间的稳定运行。  

推理服务器主要功能是对输入数据进行快速推理计算,生成预测结果。这通常用于实时应用场景,如自动驾驶、实时语音识别等。这类服务器特点是要求低延迟、高可靠性,通常采用低功耗的GPU或专用的推理芯片,如NVIDIA的TensorRT系列芯片,在保证推理速度的同时降低能耗和成本。

训推一体服务器是既能进行模型训练又能进行推理计算的服务器。它的特点是资源利用率高,可以根据实际需求灵活分配计算和存储资源。但设计和维护成本也相对较高,需要解决CPU和GPU之间的算力融合问题,以及不同任务之间的资源调度问题。

针对智算中心存在的算力融合、算力孤岛、算力低效、硬件投资与更新、网络与管理等问题,在智算中心的建设中,服务器的选择应根据实际需求进行权衡。训练服务器适用于模型开发和训练阶段,推理服务器适用于实时应用场景,而训推一体服务器则可以在两者之间实现灵活切换和资源共享。

与此同时,智算服务器与传统通用服务器最大的区别,在于算力芯片的不同。智算服务器为了保证操作系统运行,也配置了CPU。但是,为了更好地完成AI计算任务,配置了更多的GPU、NPU(神经网络处理单元)、TPU等计算芯片(4块或8块),以这些芯片输出的算力为主。

除了芯片不同之外,为了充分发挥性能以及保障稳定运行,AI服务器在架构、存储、散热、拓扑等方面也进行了强化设计。例如,智算服务器的DRAM容量通常是普通服务器的8倍,NAND容量是普通服务器的3倍,甚至它的PCB电路板层数也明显多于传统服务器。

大模型发展带来了对超大规模算力、高性能存储、超大规模算力调度及管理、绿色节能等技术能力的需求。算力中心当前阶段,规模属于万卡集群、体量大,服务器采购要多型号、多厂家,配套液冷需要专业液冷供应商提供,来解决其解耦交付痛点。

双阳华泰生物

超聚变推出FusionPoD for AI整机柜液冷服务器,从双生态、多样性算力、绿色低碳方面全方位重构智算底座,为智算集群需求打造高密、坚实、开放平台。中兴通讯推出的新互联AI服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。新华三新发布的H3C UniServer G7系列依托面向AI的可进化架构、内生AI的操作系统和管理中枢,以及拥抱AGI的多元算力体系,为用户提供了灵活、高效、绿色的算力支持。浪潮元脑服务器NF5898G8,在AI算力方面具有强大的兼容性和卓越的性能,进一步加速算力融合创新。联想新一代Neptune海神液冷服务器,允许AI和HPC客户在不需要专门的数据中心空调的情况下运行100千瓦以上的服务器机架,98%的热量将转移到水循环中。信维全新推出的AI训推服务器H8650G5I提供不同的散热SKU,包括空气冷却和液体冷却解决方案。

对于服务器厂商而言,当其身量已不再局限于提供单一硬件产品时,而是提供综合性解决方案,这些解决方案可能包括服务器、存储、网络、安全等方面。未来,智算服务器将采用更高效的能源使用方式,实现绿色计算,并加强数据和模型的保护措施,以确保数据的安全性和隐私性。

责任编辑:胡媛


返回网站首页

本文评论
中国空间站"太空菜园"画面公开!一片欣欣向荣_中国空间站菜谱
太空种菜,挑战无限!中国载人航天工程最新消息显示,神舟十八号飞船的宇航员叶光富、李聪、李广苏已在太空驻留逾4个月。从公开的画面中可见,宇航员在空间站内开展了丰富的科学实...
日期:10-26
宁德时代海外放大招!神行超充电池欧洲发布:充电10分钟能跑400公里
快科技9月6日消息,在日前举行的2023德国国际汽车及智慧出行博览会上,宁德时代正式在欧洲发布全球首款采用磷酸铁锂材料且可支持大规模量产的4C超充电池神行超充电池,这也是该电...
日期:09-06
itc保伦股份LED显示屏在各大领域的应用场景及优势!_保伦电子有限公司 官网
随着LED技术的日新月异LED显示屏凭借其无缝拼接、低亮高灰高刷新率、广视角、低功耗、长寿命等优势已然成为智慧显示领域的新潮流和趋势深受广大用户好评和青睐在这场视觉盛...
日期:09-21
谷歌 Android Studio 4.0 Beta 5 发布_android studio 4.0.1
  Android Studio 4.0 Beta 5 已发布,更新内容主要是修复 bug。   Android Gradle Plugin   Issue #152872138: 禁用 AGP 功能导致 ./gradlew connectedCheck 失败...
日期:09-14
重磅!元年科技入选爱分析2021数据智能报告代表厂商_2021爱分析·数据智能平台厂商全景报告
  近日,元年科技在中国领先的产业数字化研究与咨询机构爱分析发布的《2021年爱分析 数据智能平台厂商全景报告》中被评为代表厂商,同时入选的厂商还有亚马逊云科技、阿里云...
日期:07-17
梅西正式卖酒:签字款6瓶6600元 限量1万件_梅西卖多少钱
知名的足球运动员梅西近日通过个人实名认证微博宣布正式开始卖酒。据悉,梅西签字祝福款赤水河酒今日正式发售,全球限量1万件(成功版)。知嘛家家具哪里产的这款酒瓶上印有“succe...
日期:01-11
紫光集团选派马道杰为紫光展锐董事长「紫光展锐新任副总裁」
通信世界网消息(CWW)6月27日,紫光集团发布公告,委派集团执行副总裁马道杰先生担任紫光展锐董事长。原由紫光集团委任的紫光展锐董事吴胜武先生不再担任紫光展锐董事、董事长。紫...
日期:06-27
天盈信息引领中小企业云计算平台发展_天盈信息引领中小企业云计算平台
  (联合电讯社/广州)--摘要:针对中小型企业信息建设的现状和发展需要,广东天盈通过构建稳定的以互联网数据中心(IDC)为基础的云计算底层资源集群环境,研究基于EUCON模型与CVC...
日期:07-29
消费需求持续迭代升级,达达集团“双轮驱动”决胜新零售
  市场需求始终处于一个不断变化的过程中,就像今年疫情的爆发,便极大的改变了人们的消费习惯和方式,“同城零售”“到家服务”成为人们话题。早早布局同城零售的达达集团,在...
日期:07-10
1320亿参数,性能超LLaMA2、Grok-1!开源大模型DBRX_开源模型库
声明:本文来自于微信公众号 AIGC开放社区(ID:AIGCOPEN),作者:AIGC开放社区,授权转载发布。3月28日,著名数据和AI平台Databricks在官网正式开源大模型——DBRX。DBRX是一个专家混...
日期:03-28
打工人文案八个字「当代打工人,被迫患上“文字讨好症”」
声明:本文来自于微信公众号 刺猬公社(ID:ciweigongshe),作者: 陈梅希,授权转载发布。为什么要用国产替代进口“文字讨好症”,指为了展示自己的友善,缓和语气,在一句话末尾加上各类...
日期:05-30
手机涨价的原因_手机价格为何年年涨:消费者习惯了,钱更好“赚”了?
  1月6日消息,据国外媒体报道,由于设备制造成本的不断上升,加之某些新功能的出现,使得2019年的智能手机将更加昂贵。而高端手机价格上涨的主要原因在于,苹果、三星和业内其他...
日期:06-11
市场过度集中或带来风险 AI成美股“万能药”
北京时间5月29日早间消息,据报道,在美国股市的历史上,每一次由科技股推动的大涨都会因为基础不牢固而受到嘲讽。近期,投资者对人工智能的狂热正在独力支撑市场,而厌恶人工智能的...
日期:09-26
重庆有哪些野生龟「重庆发现巨型怪龟 几乎没有天敌 放生野外会严重破坏生态平衡」
据央视报道,近日在重庆梁平双桂堂寺庙的放生池中出现了一只巨大、丑陋、凶猛的龟。经过鉴定,这只龟既不是珍稀保护动物,也不属于中国本土的动物,而是一种叫做鳄龟的外来有害物种...
日期:05-27
狂揽35亿票房!电影《消失的她》秘钥延期9月21日「消失的什么电影」
8月14日消息,电影《消失的她》官方今日宣布,自8月22日起延长影片发行放映时间,将延长至9月21日。据了解,《消失的她》于6月22日在中国内地上映,灯塔专业版数据显示,目前该片累计票...
日期:08-14
三星 W23 5G 系列旗舰折叠屏新机将于 10 月 21 日正式发布「三星 W20 5G(SM-W2020)折叠屏手机」
10月11日消息:三星 W23 5G 系列官宣将于10月21日19:00正式发布。根据此前公布的消息, W23系列将包含两款手机,分别是三星 W23和三星 W23Flip,由Galaxy Z Fold4和 Galaxy Z Flip...
日期:10-14
2024智慧园区发展,看准这3大趋势!_智慧园区整体规划
智慧园区建设中会遇到哪些问题?来,帮你梳理全了!2024对于智慧园区的建设和发展来说,是至关重要的一年。而随着人工智能、大数据、物联网等技术的进一步深入发展,很多园区管理者...
日期:05-28
骁龙8 帧率反超骁龙8 Gen2!荣耀X50 GT发布:1999元起_荣耀使用骁龙
快科技1月4日消息,今晚19:30,荣耀正式发布了荣耀X50GT机型,这是一款主打越级性能的产品。外观设计上,荣耀X50GT延续了此前荣耀X50的整体方案,正面是一块居中开孔的双曲面屏,背部则...
日期:01-05
比亚迪高管亲自官宣:海狮07 EV将于5月上市 售价20万区间_比亚迪海狮参数
快科技4月25日消息,比亚迪海洋网销售事业部总经理张卓今日在微博上透露,旗下新车海狮07EV将于今年5月上市,价格将定位在20万元区间。从此前公布的官图来看,海狮07 EV的外观由比...
日期:04-25
文件时光机!金山T盘两招找回消失的文档
  进入大学四年级,毕业论文的压力也随之而来。在准备论文时,有时修改了论文后又想要使用原来的内容,通常就只好凭印象重写。这样前前后后的修改不仅令人心烦,而且效率大大降...
日期:07-26