您的位置:首页 > 互联网

算力中心是什么意思「寻找"算力王":智算中心需要怎样的AI服务器(附典型比较)」

发布时间:2024-12-27 16:03:51  来源:互联网     背景:

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较) 通信产业网|2024-11-12 09:30:15作者:胡媛来源:通信产业网

【通信产业网讯】(记者 胡媛)近两年,AI大模型给产业带来了巨大的影响,以GPU为核心的智算逐步成为算力的主要发展方向。据工信部规划,中国智能算力的占比将在2025年达到35%,年复合增长率在30%以上,这意味着智算中心将引领数据中心建设的潮流。

服务器是提供数据存储、运算等服务的高性能计算机,包含处理器、内存、硬盘和其他功能及基础硬件。2024年以来,中国智算中心建设如火如荼,也在不断推动着服务器厂商持续推出加速计算服务器新品。

苹果usb可能不支持配件

运营商智算“加速跑”

AI算力基础需求高增,国内供给显著改善。今年以来,运营商开展了大规模的智算中心建设,并开展了几次重要的算力服务器集采。

从资本开支来看,运营商加大算力相关资本开支。公开信息显示,2024年,中国移动算力领域预计投入475亿元,同比增长21.5%,占资本开支比重提升5.8个百分点至27.5%。中国电信产业数字化计划资本开支370亿元,同比增长4.1%,在云/算力计划投资180亿元。中国联通在算网数智投资方面将坚持适度超前、加快布局,但是未披露具体数额。可以看出,中国移动暂时拔得头筹,中国电信和中国联通紧随其后。

此外,财报显示,到2024年底,中国电信智算算力规模将大幅领先,中国移动次之。中国电信计划2024年智算算力提升10EFLOPS,超过21EFLOPS。中国移动2024年智算算力累计超过17EFLOPS。

从运营商积极布局智算中心来看,据不完全统计,目前,国内建成和在建的智算中心项目超500个,运营商为满足市场需求,正加快建设智算中心项目超80个,争夺政企市场。

中国移动优化全国性智算中心和边缘智算节点布局,全网智算规模达到17EFLOPS(FP16),年内将投产3个近两万卡超大规模单体智算中心和12个区域智算中心。中国电信适度超前建设智算基础设施,持续加大智算能力建设,规划并建设全国“2+3+7+X”公共智算云池,在京津冀、长三角地区建设两大万卡智算集群,西部地区打造大规模绿色智算池。中国联通布局热点集约、跨区辐射、边缘覆盖的多级算力体系,构建了“1+ N+X”全国分梯次智算资源,IDC规模超40万架,云池覆盖230多个城市。

从运营商招标项目来看,2024年4月,中国移动发布2024年至2025年新型智算中心采购招标公告,此次采购包含AI服务器7994台,成为有史以来国内最大规模的AI服务器集采。加上此前中国移动2023年至2024年新型智算中心(试验网)集采项目,12个标包对应AI训练服务器采购量总计达到2454台,中国移动这两次AI服务器集采规模合计超万台。

除了中国移动之外,其他两大运营商此前也开启了AI服务器大规模采购。中国联通在今年3月启动2024年人工智能服务器集采,其中,人工智能服务器采购总规模为2503台。中国电信在去年10月也采购了4175台AI服务器。以算力基础设施来说,在大模型产品迭代发展中,算力需求持续增长,带动AI服务器的需求居高不下。

算力服务是什么

AI服务器市场竞争激烈

在智算中心的建设中,服务器的选择至关重要,它直接关系到算力的强弱、任务的执行效率以及资源的利用率。一般来讲,智算中心的服务器主要包括训练服务器、推理服务器或训推一体服务器等三大类。

训练服务器主要利用大量数据对AI模型进行训练,通过调整模型参数使模型更好地拟合数据,学习数据中的特征和规律。这通常需要高性能的硬件支持,如高性能GPU或TPU(张量处理单元),以及大容量内存和高速存储设备。此类服务器的特点是适用于模型开发和训练阶段,需要强大的计算能力和长时间的稳定运行。  

推理服务器主要功能是对输入数据进行快速推理计算,生成预测结果。这通常用于实时应用场景,如自动驾驶、实时语音识别等。这类服务器特点是要求低延迟、高可靠性,通常采用低功耗的GPU或专用的推理芯片,如NVIDIA的TensorRT系列芯片,在保证推理速度的同时降低能耗和成本。

训推一体服务器是既能进行模型训练又能进行推理计算的服务器。它的特点是资源利用率高,可以根据实际需求灵活分配计算和存储资源。但设计和维护成本也相对较高,需要解决CPU和GPU之间的算力融合问题,以及不同任务之间的资源调度问题。

针对智算中心存在的算力融合、算力孤岛、算力低效、硬件投资与更新、网络与管理等问题,在智算中心的建设中,服务器的选择应根据实际需求进行权衡。训练服务器适用于模型开发和训练阶段,推理服务器适用于实时应用场景,而训推一体服务器则可以在两者之间实现灵活切换和资源共享。

算力服务是什么

与此同时,智算服务器与传统通用服务器最大的区别,在于算力芯片的不同。智算服务器为了保证操作系统运行,也配置了CPU。但是,为了更好地完成AI计算任务,配置了更多的GPU、NPU(神经网络处理单元)、TPU等计算芯片(4块或8块),以这些芯片输出的算力为主。

除了芯片不同之外,为了充分发挥性能以及保障稳定运行,AI服务器在架构、存储、散热、拓扑等方面也进行了强化设计。例如,智算服务器的DRAM容量通常是普通服务器的8倍,NAND容量是普通服务器的3倍,甚至它的PCB电路板层数也明显多于传统服务器。

大模型发展带来了对超大规模算力、高性能存储、超大规模算力调度及管理、绿色节能等技术能力的需求。算力中心当前阶段,规模属于万卡集群、体量大,服务器采购要多型号、多厂家,配套液冷需要专业液冷供应商提供,来解决其解耦交付痛点。

超聚变推出FusionPoD for AI整机柜液冷服务器,从双生态、多样性算力、绿色低碳方面全方位重构智算底座,为智算集群需求打造高密、坚实、开放平台。中兴通讯推出的新互联AI服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。新华三新发布的H3C UniServer G7系列依托面向AI的可进化架构、内生AI的操作系统和管理中枢,以及拥抱AGI的多元算力体系,为用户提供了灵活、高效、绿色的算力支持。浪潮元脑服务器NF5898G8,在AI算力方面具有强大的兼容性和卓越的性能,进一步加速算力融合创新。联想新一代Neptune海神液冷服务器,允许AI和HPC客户在不需要专门的数据中心空调的情况下运行100千瓦以上的服务器机架,98%的热量将转移到水循环中。信维全新推出的AI训推服务器H8650G5I提供不同的散热SKU,包括空气冷却和液体冷却解决方案。

苹果手机红警游戏

对于服务器厂商而言,当其身量已不再局限于提供单一硬件产品时,而是提供综合性解决方案,这些解决方案可能包括服务器、存储、网络、安全等方面。未来,智算服务器将采用更高效的能源使用方式,实现绿色计算,并加强数据和模型的保护措施,以确保数据的安全性和隐私性。

责任编辑:胡媛

几米比50米长25%


返回网站首页

本文评论
京东的品牌战略_品牌价值不断提升 京东荣获“2020我喜爱的中国品牌”
  品牌的价值与力量正受到前所未有的重视。   6月10日,在由中国国家品牌网、新华网、新华99联合主办的点赞“2020我喜爱的中国品牌”暨“全球抗疫 品牌力量”经典案例发...
日期:07-14
iPhone 14坐过山车误报“车祸”!官方回应让人无语
今年新推出的iPhone 14系列亮点并不算多,不过新的车祸监测功能还是非常受人关注的,经测试新功能能够在用户遭遇事故时紧急报警。然而,这一功能似乎过于灵敏,近日,海外有反馈称,多...
日期:10-11
eBay宣布将裁员500人 约占员工总数4%_ebay工资
  讯 北京时间2月8日早间消息,据报道,当地时间周二,eBay提交给美国证券交易委员会(SEC)的文件显示,eBay宣布计划裁员500人,约占其员工总数的4%。  随后,eBay股价在盘后交易中小...
日期:02-08
OPPO天玑之王!OPPO周意保剧透Find X8:哪哪都强
快科技5月25日消息,OPPO周意保透露,Find X8以及未来的大折叠屏旗舰做到了哪哪都强,拍照强、性能强、电池大、续航长,还轻薄。周意保表示,OPPO很早就做出了4.9mm的概念手机,虽然这...
日期:05-26
千万级网红"听泉鉴宝"停播内背后:供货商被列入异常经营名单_《听泉》阅读答案
网红听泉鉴宝遭质疑,学历和藏品成焦点 redmi note11入网公示继知名网红后,拥有超过 2500 万粉丝的抖音博主听泉鉴宝也引发争议,其学历真实性和藏品问题受到关注。目前,听泉...
日期:11-01
谷歌推时间序列预测模型TimesFM 可预测股市、天气等_谷歌时间轴设置
2月4日 消息:Google研究团队最近推出了一款名为TimesFM的时间序列预测模型。时间序列预测是一种通过分析过去的数据来预测未来事件发生的方法,广泛应用于商业、金融和科研等...
日期:02-04
离谱!最新研究:61%中国人写的英语论文,会被ChatGPT检测器判为AI生成的
新智元报道编辑:拉燕【新智元导读】非母语者写的文章=AI生成?气抖冷。ChatGPT火了以后,用法是真多。有人拿来寻求人生建议,有人干脆当搜索引擎用,还有人拿来写论文。论文...可不...
日期:05-05
iQOO 11S搭载鸡血版骁龙8 Gen2:CPU狂飙至3.36GHz「iqoo8pro 11ultra」
数码闲聊站透露,iQOO 11S将搭载高通鸡血版骁龙8 Gen2移动平台,这是目前高通公司最强的5G SoC芯片,让iQOO 11S成为了最强悍的骁龙手机。据悉,鸡血版比普通版的CPU频率更高,最高达...
日期:05-27
米家空调巨省电5匹上线 专为大空间场景打造「米家空调2匹巨省电和鎏金版」
小米商城上新了全新立式空调——米家空调巨省电5匹,轻松覆盖50-80㎡、立体送风可达15m、支持全屋互联语音控制、高温清洁除菌除尘。8月10号消息,小米商城上新了全新立式空调—...
日期:08-11
上市仅7天!阿维塔11鸿蒙版大定订单破5000台_阿维塔chn平台e11车外观
快科技9月1日消息,就在刚刚,我们从阿维塔官方获悉,阿维塔11鸿蒙版自8月24日上市以来,仅用7天,大定订单就突破了5000台,持续领跑高端SEV赛道。盲人可以玩电脑吗新车提供5000元定金...
日期:09-02
BOSS直聘向港交所递交双重主要上市申请_香港联交所上市流程
凤凰网科技讯 10月10日消息,BOSS直聘(NASDAQ:BZ)向香港联交所递交双重主要上市申请。摩根士丹利、高盛担任联席保荐人。双重主要上市流程完成后,BOSS直聘将成为同时在美国纳斯达...
日期:10-12
2008年中国南方雪灾带来的影响有哪些「2008年南方罕见雨雪冰冻会重演吗 中国天气网:不会」
快科技1月30日消息,据中国天气网消息,1月31日开始,我国中东部地区将遭遇今冬以来最大范围、最长时间的雨雪天气过程。中央气象台预计,1月31日至2月5日,西北地区东部、华北、东北...
日期:01-31
微信终于瘦了!网友:手机“有救了”_瘦微信图片
微信又更新了!这次版本号为8.0.46,ios和安卓平台都已发布,昨天多个相关话题冲上微博热搜。存储空间优化原本的存储空间界面只有三个板块:缓存、聊天记录、其他数据,其中缓存和聊...
日期:01-27
模型大神「大模型 运营商下一个“星辰大海”!」
通信世界网消息(CWW)近两年,随着ChatGPT卷起大模型应用“风暴”,大模型在全球资本市场和技术市场掀起狂澜。无论是“巨头”还是“独角兽”,纷纷官宣进军大模型,并陆续推出各自研发...
日期:08-20
QQ 押注短视频赛道,“小世界”能否变成“大视界”_qq小世界网址
声明:本文来自于微信公众号 鸟哥笔记(ID:niaoge8),作者:花花小萌主,授权转载发布。提起QQ,有多少人会想起学生时代那些如今看来杀马特的名称和头像?你也许不知道,QQ,今年24岁了。过...
日期:12-12
小明科技投影机官网「双11小明投影大放异彩,斩获单LCD投影销售额第一」
一年一度的双十一购物节落下帷幕!今年,你的购物车都清空了什么呢?2023 年双 11 圆满结束,LCD投影行业的领导品牌小明投影品牌(以下简称“小明”)大放异彩,获得京东、天猫平台单...
日期:11-17
五站巡展火爆全国,三星电视何以如此强悍「2021 三星电视」
几乎有两个人那么高、由三台巨屏拼接而成的电视“瀑布墙”,直观地宣示着 98 英寸QLED电视的超大面积,以及超薄机身所带来的视觉冲击力。“头顶”一排公仔娃娃,造型犹如置物架的...
日期:09-04
内部员工称苹果AI至少落后2年:ChatGPT准确率比Siri高出约25%_苹果ai是谁
10月21日 消息:在最新一期的Power On节目中,Mark Gurman透露,苹果公司内部员工普遍认为,苹果在人工智能领域的发展落后于行业领导者大约两年时间。苹果的内部研究显示,与苹果的S...
日期:10-21
开出天价!OpenAI新大模型 “草莓” 和 “猎户座” 打算每月收费 2000 美元!
最近,OpenAI高管正酝酿一项令人瞠目结舌的订阅计划 - 即将推出的新大模型"草莓"和"猎户座"价格高达每月2000美元,比当前ChatGPT Plus的20美元高出整整100倍!这种天价定价,无疑...
日期:09-06
中国移动研究院2023年仪器仪表采购:中国仪器、中电科思仪等多家企业中标
通信世界网消息(CWW)近日,中国移动官网陆续公布了中国移动研究院2023年仪器仪表采购项目结果,已公布的结果显示,中国仪器、北京通测、中电科思仪等多家企业中标。据悉,本次采购项...
日期:07-12