您的位置:首页 > 互联网

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较)_算力中心怎么挣钱

发布时间:2024-12-25 11:40:17  来源:互联网     背景:

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较) 通信产业网|2024-11-12 09:30:15作者:胡媛来源:通信产业网

【通信产业网讯】(记者 胡媛)近两年,AI大模型给产业带来了巨大的影响,以GPU为核心的智算逐步成为算力的主要发展方向。据工信部规划,中国智能算力的占比将在2025年达到35%,年复合增长率在30%以上,这意味着智算中心将引领数据中心建设的潮流。

服务器是提供数据存储、运算等服务的高性能计算机,包含处理器、内存、硬盘和其他功能及基础硬件。2024年以来,中国智算中心建设如火如荼,也在不断推动着服务器厂商持续推出加速计算服务器新品。

运营商智算“加速跑”

AI算力基础需求高增,国内供给显著改善。今年以来,运营商开展了大规模的智算中心建设,并开展了几次重要的算力服务器集采。

从资本开支来看,运营商加大算力相关资本开支。公开信息显示,2024年,中国移动算力领域预计投入475亿元,同比增长21.5%,占资本开支比重提升5.8个百分点至27.5%。中国电信产业数字化计划资本开支370亿元,同比增长4.1%,在云/算力计划投资180亿元。中国联通在算网数智投资方面将坚持适度超前、加快布局,但是未披露具体数额。可以看出,中国移动暂时拔得头筹,中国电信和中国联通紧随其后。

此外,财报显示,到2024年底,中国电信智算算力规模将大幅领先,中国移动次之。中国电信计划2024年智算算力提升10EFLOPS,超过21EFLOPS。中国移动2024年智算算力累计超过17EFLOPS。

从运营商积极布局智算中心来看,据不完全统计,目前,国内建成和在建的智算中心项目超500个,运营商为满足市场需求,正加快建设智算中心项目超80个,争夺政企市场。

算力中心怎么挣钱

党史的简单概括500字

中国移动优化全国性智算中心和边缘智算节点布局,全网智算规模达到17EFLOPS(FP16),年内将投产3个近两万卡超大规模单体智算中心和12个区域智算中心。中国电信适度超前建设智算基础设施,持续加大智算能力建设,规划并建设全国“2+3+7+X”公共智算云池,在京津冀、长三角地区建设两大万卡智算集群,西部地区打造大规模绿色智算池。中国联通布局热点集约、跨区辐射、边缘覆盖的多级算力体系,构建了“1+ N+X”全国分梯次智算资源,IDC规模超40万架,云池覆盖230多个城市。

从运营商招标项目来看,2024年4月,中国移动发布2024年至2025年新型智算中心采购招标公告,此次采购包含AI服务器7994台,成为有史以来国内最大规模的AI服务器集采。加上此前中国移动2023年至2024年新型智算中心(试验网)集采项目,12个标包对应AI训练服务器采购量总计达到2454台,中国移动这两次AI服务器集采规模合计超万台。

除了中国移动之外,其他两大运营商此前也开启了AI服务器大规模采购。中国联通在今年3月启动2024年人工智能服务器集采,其中,人工智能服务器采购总规模为2503台。中国电信在去年10月也采购了4175台AI服务器。以算力基础设施来说,在大模型产品迭代发展中,算力需求持续增长,带动AI服务器的需求居高不下。

AI服务器市场竞争激烈

在智算中心的建设中,服务器的选择至关重要,它直接关系到算力的强弱、任务的执行效率以及资源的利用率。一般来讲,智算中心的服务器主要包括训练服务器、推理服务器或训推一体服务器等三大类。

上海第一家盒马X会员店地址

训练服务器主要利用大量数据对AI模型进行训练,通过调整模型参数使模型更好地拟合数据,学习数据中的特征和规律。这通常需要高性能的硬件支持,如高性能GPU或TPU(张量处理单元),以及大容量内存和高速存储设备。此类服务器的特点是适用于模型开发和训练阶段,需要强大的计算能力和长时间的稳定运行。  

推理服务器主要功能是对输入数据进行快速推理计算,生成预测结果。这通常用于实时应用场景,如自动驾驶、实时语音识别等。这类服务器特点是要求低延迟、高可靠性,通常采用低功耗的GPU或专用的推理芯片,如NVIDIA的TensorRT系列芯片,在保证推理速度的同时降低能耗和成本。

训推一体服务器是既能进行模型训练又能进行推理计算的服务器。它的特点是资源利用率高,可以根据实际需求灵活分配计算和存储资源。但设计和维护成本也相对较高,需要解决CPU和GPU之间的算力融合问题,以及不同任务之间的资源调度问题。

针对智算中心存在的算力融合、算力孤岛、算力低效、硬件投资与更新、网络与管理等问题,在智算中心的建设中,服务器的选择应根据实际需求进行权衡。训练服务器适用于模型开发和训练阶段,推理服务器适用于实时应用场景,而训推一体服务器则可以在两者之间实现灵活切换和资源共享。

与此同时,智算服务器与传统通用服务器最大的区别,在于算力芯片的不同。智算服务器为了保证操作系统运行,也配置了CPU。但是,为了更好地完成AI计算任务,配置了更多的GPU、NPU(神经网络处理单元)、TPU等计算芯片(4块或8块),以这些芯片输出的算力为主。

除了芯片不同之外,为了充分发挥性能以及保障稳定运行,AI服务器在架构、存储、散热、拓扑等方面也进行了强化设计。例如,智算服务器的DRAM容量通常是普通服务器的8倍,NAND容量是普通服务器的3倍,甚至它的PCB电路板层数也明显多于传统服务器。

大模型发展带来了对超大规模算力、高性能存储、超大规模算力调度及管理、绿色节能等技术能力的需求。算力中心当前阶段,规模属于万卡集群、体量大,服务器采购要多型号、多厂家,配套液冷需要专业液冷供应商提供,来解决其解耦交付痛点。

超聚变推出FusionPoD for AI整机柜液冷服务器,从双生态、多样性算力、绿色低碳方面全方位重构智算底座,为智算集群需求打造高密、坚实、开放平台。中兴通讯推出的新互联AI服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。新华三新发布的H3C UniServer G7系列依托面向AI的可进化架构、内生AI的操作系统和管理中枢,以及拥抱AGI的多元算力体系,为用户提供了灵活、高效、绿色的算力支持。浪潮元脑服务器NF5898G8,在AI算力方面具有强大的兼容性和卓越的性能,进一步加速算力融合创新。联想新一代Neptune海神液冷服务器,允许AI和HPC客户在不需要专门的数据中心空调的情况下运行100千瓦以上的服务器机架,98%的热量将转移到水循环中。信维全新推出的AI训推服务器H8650G5I提供不同的散热SKU,包括空气冷却和液体冷却解决方案。

对于服务器厂商而言,当其身量已不再局限于提供单一硬件产品时,而是提供综合性解决方案,这些解决方案可能包括服务器、存储、网络、安全等方面。未来,智算服务器将采用更高效的能源使用方式,实现绿色计算,并加强数据和模型的保护措施,以确保数据的安全性和隐私性。

责任编辑:胡媛


返回网站首页

本文评论
AI自动绘画网站「二次元ai绘画生成器推荐:draft网站效果惊艳(附draft.art官网入口)」
今年以来,国内外都掀起了一阵AI绘画潮流,很多绘画小白都跃跃欲试想借助ai绘画创作出有趣的作品。小编发现,其中有不少网友对二次元ai绘画颇感兴趣,下文就跟大家分享一款使用效果...
日期:11-26
24岁女生去酒吧被当未成年拦下 只因长得太像小孩
10月22日,重庆。一娃娃脸女生去酒吧被保安当成未成年拦下,向保安出示身份证后才被放行。当事人伍同学自嘲自己有一张天生的娃娃脸,她表示自己24岁了,但由于身高和外貌,经常被人误...
日期:10-26
律师解读,涉违规违法-度小满被曝频繁骚扰贷款紧急联系人_度小满金融 骚扰电话
IT之家 5 月 17 日消息,本月初,有网友称自己频繁被度小满电话骚扰,度小满方面则回应称是他的一位朋友借了钱,并将他设为紧急联系人,而他自己称跟这位朋友平时极少联系,对方没道理...
日期:05-18
中国电动汽车出口火爆致运输船短缺:运费飙升一船难求_国产电动汽车出口
快科技1月8日消息,据国内多家媒体报道,中国电动汽车出口十分火热,带动国际航运市场的发展,导致汽车运输船短缺、运费一路飙升,甚至一船难求。据悉,早在2020年,全球的汽车工厂因疫情...
日期:01-09
360行车记录仪双11霸榜,京东记录仪热销榜单TOP6独占五席(360行车记录仪线下有售吗)
  一夜过去,双11的战争还在继续。各大电商平台不断刷新成交额,不停被打破的记录再次刷爆大家的眼球。在行车记录仪领域,360行车记录仪双11开售53秒即破千万销售额,天猫、京东...
日期:10-19
CNET更新AI政策 员工将对AI内容进行动手审查和测试
6月7日 消息:日前,CNET更新了其AI政策,指出没有故事将完全由AI工具产生,人类将对产品进行动手审查和测试。该网站正在探索使用人工智能工具来分析数据、创建大纲和生成解释性内...
日期:06-07
淘宝双12活动今年取消 以用户为先_双12以后淘宝还有活动吗
淘宝网商家服务大厅显示,淘宝双 12 活动今年取消不再举办,今年 12 月会举办平台大型活动“淘宝年终好价节”,预计 11 月底开始招商。今年双 11 天猫发布成绩单显示,截至 11 月 1...
日期:11-25
硅谷巨头比惨,苹果独善其身?_美国硅谷巨头
声明:本文来自于微信公众号真探AlphaSeeke,作者:李静林,授权转载发布。苹果也没能止住美股的颓势。日前,微软、谷歌、Meta三家公司发布财报:Meta利润暴跌52%到44亿美元,微软营收增...
日期:10-29
千名广场舞红人云集糖豆达人年会 燃情盛典完美落幕(糖豆广场舞百姓的舞台)
  10月27日,以“东方美▪锦绣芳华”为主题的糖豆达人年度盛典在浙江横店拉开帷幕。来自全国各地的数千糖豆“明星达人”和舞友粉丝齐聚一堂,用舞蹈写意锦绣芳华,体验如梦如...
日期:01-17
保时捷在中国的销量「国人不想买了?保时捷销量全球市场大涨 唯独中国区大跌」
快科技10月15日消息,德国大众旗下豪华品牌保时捷官网显示,2023年前三季度保时捷在全球实现24.27万辆交付量,同比增长10%。其中,中国市场贡献6.07万辆交付量,同比下滑12%。今年上...
日期:10-16
苹果回应反垄断调查「苹果韩总部遭反垄断机构突击检查,被指向开发者收取33%佣金」
苹果的韩国总部被反垄断监管机构突击检查,因为有开发者投诉苹果向他们收取超30%的标准App Store佣金率。当地媒体周一报道了韩国公平贸易委员会(KFTC)的黎明突袭行动,Foss Pat...
日期:10-01
google pixel1「谷歌pixel9颜值很高-谷歌Pixel9系列官方渲染图曝光」
来源:中关村在线大菜汪表情包根据最新消息,海外数码博主近日分享了一组谷歌Pixel 9系列的官方渲染图。这些图片展示了Pixel 9、Pixel 9 Pro以及Pixel 9 Pro XL的外观设计,并通...
日期:08-08
分析显示:AI 女友比 AI 男友更受欢迎,下载量多七倍
3 月 16 日消息:根据 App Radar 和专注于应用增长解决方案的公司 SplitMetrics 的分析,AI 女友比 AI 男友更受欢迎,大约多七倍。AI 伴侣的受欢迎程度飙升,SplitMetrics 发现,在 G...
日期:03-16
马斯克的"读脑"设备首次植入人体,科学家期待什么?担忧什么?
2月4日消息,埃隆·马斯克(Elon Musk)创建的Neuralink旨在改变我们对脑机接口的认知,让科幻变成了现实。1月29日发布的消息中,马斯克宣布Neuralink已成功将其“读脑”设备首次植入...
日期:02-08
新SOTA来了:国产9B模型多项得分超4o-mini,中国出海电商已经用上了_99b模型
声明:本文来自于微信公众号 量子位,作者:茕茕,授权转载发布。阿里开源,又拿第一了。这次是在多模态领域:就在刚刚,阿里国际AI团队开源多模态大模型Ovis1.6。在多模态权威综合评...
日期:09-19
微软称正设法降低老版IE份额为IE9让路
  据国外媒体报道,就IE9、浏览器市场、用户隐私以及其它相关内容,微软副总裁兼IE项目负责人迪恩·哈查莫奇(Dean Hachamovitch)今天在国际消费电子展(CES)上接受了华尔街日...
日期:07-25
苹果用久了你还会考虑换安卓吗?五成投票网友不考虑换安卓「用久了苹果手机换安卓」
快科技7月22日消息,微博话题iPhone羡慕安卓的功能”上了热搜榜并引起网友热议。有媒体发起微博投票调研苹果用久了,还会考虑换安卓吗?”,投票结果显示,50%网友投给我用苹果很久了...
日期:07-23
太空站中国空间站「中国空间站"太空菜园"画面公开!一片欣欣向荣」
太空种菜,挑战无限!中国载人航天工程最新消息显示,神舟十八号飞船的宇航员叶光富、李聪、李广苏已在太空驻留逾4个月。从公开的画面中可见,宇航员在空间站内开展了丰富的科学实...
日期:09-04
荣耀官方旗舰店周年庆成绩亮眼,荣耀V30、荣耀9X获多项冠军(荣耀v4099元)
  今天(1月10日),荣耀公布了天猫荣耀官方旗舰店周年庆销售战报。战报显示,1月9日,荣耀斩获天猫手机品牌当日销量冠军,荣耀V30斩获天猫手机单品销量、安卓手机销量&销售额三冠...
日期:02-25
从2098元降至1398元,2000万+6GB,屏下指纹手机开始变得平民价_便宜的屏下指纹手机
  同样都是手机,拥有了屏幕指纹功能和没有屏幕指纹功能的感觉完全不一样,因为没有屏幕指纹功能的手机,要么是非全面屏设计的老式机型,又或者是将指纹识别模块放置在机身背面...
日期:05-02