您的位置:首页 > 互联网

算力中心是什么意思「寻找"算力王":智算中心需要怎样的AI服务器(附典型比较)」

发布时间:2024-12-25 15:04:40  来源:互联网     背景:

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较) 通信产业网|2024-11-12 09:30:15作者:胡媛来源:通信产业网

【通信产业网讯】(记者 胡媛)近两年,AI大模型给产业带来了巨大的影响,以GPU为核心的智算逐步成为算力的主要发展方向。据工信部规划,中国智能算力的占比将在2025年达到35%,年复合增长率在30%以上,这意味着智算中心将引领数据中心建设的潮流。

服务器是提供数据存储、运算等服务的高性能计算机,包含处理器、内存、硬盘和其他功能及基础硬件。2024年以来,中国智算中心建设如火如荼,也在不断推动着服务器厂商持续推出加速计算服务器新品。

运营商智算“加速跑”

AI算力基础需求高增,国内供给显著改善。今年以来,运营商开展了大规模的智算中心建设,并开展了几次重要的算力服务器集采。

从资本开支来看,运营商加大算力相关资本开支。公开信息显示,2024年,中国移动算力领域预计投入475亿元,同比增长21.5%,占资本开支比重提升5.8个百分点至27.5%。中国电信产业数字化计划资本开支370亿元,同比增长4.1%,在云/算力计划投资180亿元。中国联通在算网数智投资方面将坚持适度超前、加快布局,但是未披露具体数额。可以看出,中国移动暂时拔得头筹,中国电信和中国联通紧随其后。

EOS空投

此外,财报显示,到2024年底,中国电信智算算力规模将大幅领先,中国移动次之。中国电信计划2024年智算算力提升10EFLOPS,超过21EFLOPS。中国移动2024年智算算力累计超过17EFLOPS。

从运营商积极布局智算中心来看,据不完全统计,目前,国内建成和在建的智算中心项目超500个,运营商为满足市场需求,正加快建设智算中心项目超80个,争夺政企市场。

丰田放弃电动汽车

中国移动优化全国性智算中心和边缘智算节点布局,全网智算规模达到17EFLOPS(FP16),年内将投产3个近两万卡超大规模单体智算中心和12个区域智算中心。中国电信适度超前建设智算基础设施,持续加大智算能力建设,规划并建设全国“2+3+7+X”公共智算云池,在京津冀、长三角地区建设两大万卡智算集群,西部地区打造大规模绿色智算池。中国联通布局热点集约、跨区辐射、边缘覆盖的多级算力体系,构建了“1+ N+X”全国分梯次智算资源,IDC规模超40万架,云池覆盖230多个城市。

从运营商招标项目来看,2024年4月,中国移动发布2024年至2025年新型智算中心采购招标公告,此次采购包含AI服务器7994台,成为有史以来国内最大规模的AI服务器集采。加上此前中国移动2023年至2024年新型智算中心(试验网)集采项目,12个标包对应AI训练服务器采购量总计达到2454台,中国移动这两次AI服务器集采规模合计超万台。

除了中国移动之外,其他两大运营商此前也开启了AI服务器大规模采购。中国联通在今年3月启动2024年人工智能服务器集采,其中,人工智能服务器采购总规模为2503台。中国电信在去年10月也采购了4175台AI服务器。以算力基础设施来说,在大模型产品迭代发展中,算力需求持续增长,带动AI服务器的需求居高不下。

制造业降本增效合理化建议

AI服务器市场竞争激烈

算力智库

在智算中心的建设中,服务器的选择至关重要,它直接关系到算力的强弱、任务的执行效率以及资源的利用率。一般来讲,智算中心的服务器主要包括训练服务器、推理服务器或训推一体服务器等三大类。

训练服务器主要利用大量数据对AI模型进行训练,通过调整模型参数使模型更好地拟合数据,学习数据中的特征和规律。这通常需要高性能的硬件支持,如高性能GPU或TPU(张量处理单元),以及大容量内存和高速存储设备。此类服务器的特点是适用于模型开发和训练阶段,需要强大的计算能力和长时间的稳定运行。  

售价1.2万元!腾讯投资了一家深圳两轮电动车公司怎么样

推理服务器主要功能是对输入数据进行快速推理计算,生成预测结果。这通常用于实时应用场景,如自动驾驶、实时语音识别等。这类服务器特点是要求低延迟、高可靠性,通常采用低功耗的GPU或专用的推理芯片,如NVIDIA的TensorRT系列芯片,在保证推理速度的同时降低能耗和成本。

训推一体服务器是既能进行模型训练又能进行推理计算的服务器。它的特点是资源利用率高,可以根据实际需求灵活分配计算和存储资源。但设计和维护成本也相对较高,需要解决CPU和GPU之间的算力融合问题,以及不同任务之间的资源调度问题。

针对智算中心存在的算力融合、算力孤岛、算力低效、硬件投资与更新、网络与管理等问题,在智算中心的建设中,服务器的选择应根据实际需求进行权衡。训练服务器适用于模型开发和训练阶段,推理服务器适用于实时应用场景,而训推一体服务器则可以在两者之间实现灵活切换和资源共享。

与此同时,智算服务器与传统通用服务器最大的区别,在于算力芯片的不同。智算服务器为了保证操作系统运行,也配置了CPU。但是,为了更好地完成AI计算任务,配置了更多的GPU、NPU(神经网络处理单元)、TPU等计算芯片(4块或8块),以这些芯片输出的算力为主。

除了芯片不同之外,为了充分发挥性能以及保障稳定运行,AI服务器在架构、存储、散热、拓扑等方面也进行了强化设计。例如,智算服务器的DRAM容量通常是普通服务器的8倍,NAND容量是普通服务器的3倍,甚至它的PCB电路板层数也明显多于传统服务器。

大模型发展带来了对超大规模算力、高性能存储、超大规模算力调度及管理、绿色节能等技术能力的需求。算力中心当前阶段,规模属于万卡集群、体量大,服务器采购要多型号、多厂家,配套液冷需要专业液冷供应商提供,来解决其解耦交付痛点。

超聚变推出FusionPoD for AI整机柜液冷服务器,从双生态、多样性算力、绿色低碳方面全方位重构智算底座,为智算集群需求打造高密、坚实、开放平台。中兴通讯推出的新互联AI服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。新华三新发布的H3C UniServer G7系列依托面向AI的可进化架构、内生AI的操作系统和管理中枢,以及拥抱AGI的多元算力体系,为用户提供了灵活、高效、绿色的算力支持。浪潮元脑服务器NF5898G8,在AI算力方面具有强大的兼容性和卓越的性能,进一步加速算力融合创新。联想新一代Neptune海神液冷服务器,允许AI和HPC客户在不需要专门的数据中心空调的情况下运行100千瓦以上的服务器机架,98%的热量将转移到水循环中。信维全新推出的AI训推服务器H8650G5I提供不同的散热SKU,包括空气冷却和液体冷却解决方案。

对于服务器厂商而言,当其身量已不再局限于提供单一硬件产品时,而是提供综合性解决方案,这些解决方案可能包括服务器、存储、网络、安全等方面。未来,智算服务器将采用更高效的能源使用方式,实现绿色计算,并加强数据和模型的保护措施,以确保数据的安全性和隐私性。

责任编辑:胡媛


返回网站首页

本文评论
经典功能回归,微软 Edge 浏览器将支持 RSS 订阅(新版edge阅读模式)
  12 月 26 日消息,据 Windows Latest 报道,在谷歌之后,微软也开始测试基于 RSS 的“关注”按钮和订阅,以帮助用户与喜爱的网站保持联系。   在最新 Windows 版 Edge Canar...
日期:04-10
撞电动车被要2500后越想越不对:3人骑电动车碰瓷1个月骗1万多_电瓶车撞人被讹诈
江苏的邱先生在驾车行驶至一路口时,不慎与一辆电动车发生了碰撞,导致电动车上的男子倒地。该男子随后向邱先生索要了2500元作为赔偿,邱先生通过转账支付了这笔费用。然而,事后邱...
日期:10-15
小米12T Pro真机泄露:2亿像素主摄加持 搭载三星HP1传感器_小米10pro1亿像素传感器
日前小米官宣,将于10月4日举行全球发布会,届时以小米12T系列为代表的多款新品将正式与大家见面。随着发布会的日益临近,外界关于该机的爆料也更加密集。现在有最新消息,继外观渲...
日期:10-01
苹果13官网降价「苹果中国开启新年福利:iPhone 13等降价优惠千元!」
很快新年就要来了,苹果中国也是开启了优惠活动,iPhone 13等也都在列。3d全曲面玻璃机身什么意思iphone是一体屏吗从官方公布的细节看,2022年12月30日至2023年1月2日用指定支付...
日期:12-27
字节裁员最新内容「裁员1.1万?字节为何还在去肥增瘦」
  文/赵东山  编辑/李薇  字节跳动员工李蓓最近颇感不安,担心随时被裁的焦虑情绪一直笼罩着她。  最近,她眼睁睁看着同事们一个一个地被裁离开了公司。就在一个月前,她...
日期:01-10
自家代工 纯纯小灶特供版 三星Galaxy-S23全系首发超频版第二代骁龙8
据三星海外官方日前宣布,将于2月1日举行Galaxy Unpacked活动,届时三星新一代年度旗舰Galaxy S23系列将正式与大家见面,而随着发布时间的日益临近,外界关于该机的爆料已经非常密...
日期:09-20
百度新车标外观专利获授权 造型罕见_百度标志的图片
2月24日,百度车标外观专利获授权,新车标外观曝光。天眼查摘要显示,本外观设计产品用作车标,设计要点在于产品的形状。另外,本外观设计产品的背面为使用时不容易看到的部位,省略后...
日期:02-25
姚弛的旅游搭档 姚弛用当贝投影拍出的投影仪大片也太有质感了
  小编期待的下饭综艺《春日酱》更新了,一群少年用露营的方式解锁周末短途新玩法这个主题太赞了。其中小编喜欢的爱豆姚弛也在节目中,再一番列文虎克后,发现姚弛在节目中用...
日期:07-18
小米Civi 3首发天玑8200 Ultra「小米天玑820怎么样」
小米Civi 3正式迎来官宣,这款手机将于5月25日14点发布,最大的看点在于首发联发科天玑8200 Ultra芯片,在影像方面会有大幅提升。天玑8200 Ultra已经出现在Geekbench的数据库中,单...
日期:05-22
亏损10亿美元!奈飞较5月低点反弹50%,空头遭重创_美股奈飞股价
  最近几个月做空奈飞(NFLX.US)的投资者损失惨重。  这家流媒体巨头的股价较5月份的低点飙升了50%,这主要得益于其推出有助于重振增长的新功能、季度业绩好于预期,以及最...
日期:09-28
华为高管李小龙简历「华为终端BG CTO李小龙:Mate 60 Pro不会让你失望」
快科技8月29日消息,今天中午,突然开售的华为Mate 60 Pro,瞬间引爆了手机圈。有网友晒出华为Mate 60 Pro的订单截图,并在华为终端BG CTO李小龙微博下留言:”龙哥,不要让我们失望。...
日期:08-29
z世代分析「研究显示:Z世代是生成式AI的早期采用者 80%英国青少年已用过」
划重点:1. oled电视机和qled电视机到底哪个好WPS 金山文档一加8t支持dash闪充吗苹果12中国市场销量...
日期:11-29
NASA开发ChatGPT风格AI,想让宇航员与飞船自由对话「nasa ticket to mars」
6月26日消息,在科幻电影《2001太空漫游》中, AI超级计算机HAL 9000与飞往木星的宇航员进行聊天,执行他们的命令并警告他们机舱内的故障,但最终失控并杀害宇航员。然而,这并没有阻...
日期:06-26
苹果首席隐私官 Jane Horvath 将离职
IT之家 8 月 31 日消息,根据彭博社的一份新报告,苹果隐私主管 Jane Horvath 将离开公司,加入一家律师事务所。Horvath 在过去几年一直担任苹果的首席隐私官,在此之前,她是该公司...
日期:08-31
成本下滑净利润也下滑 阅文原地踏步(成本下降时利润一定是增加的)
来源:北京商报   2017年11月上市的阅文习惯半年发布一次财报,在至今披露的5份半年报中,只有2022年8月15日发布的2022年上半年财报出现了营收同比减少。根据财报,阅文2022年上...
日期:08-17
小米1030w快充「前代的遗憾终于补齐了 小米13-Ultra 90W快充头闲鱼偷跑」
去年12月,小米推出了高端旗舰的最新力作小米13系列,包含小米13和小米13 Pro两款机型,在高端市场再度获得了广泛的好评,只是不少用户所期待的超大杯机型小米13 Ultra并未出现在此...
日期:09-19
中国电信2024年度工作会举行_中国电信2020工作报告
中国电信2024年度工作会举行 通信产业网|2023-12-23 08:07:45作者:通文来源:通信产业网【通信产业网讯】12月20日至22日,中国电信2024年度工作会议在京召开。会议以习近平新时...
日期:12-27
苹果最强机皇苹果最强机皇开售就降价 iPhone,16 Pro Max官方售价降至9499元
来源:中关村在线在2024年双11电商节期间,苹果公司发布了他们最新款的iPhone 16系列手机,并且官方渠道开始进行降价促销。这款新机自发布以来,这是首次官方降价。陆巡V8发动机根...
日期:10-21
AI让工作更轻松?这些人不同意:"我工作量翻倍了!"「ai将会使工作发生何种改变」
网易科技讯7月24日消息,自从去年年底聊天机器人ChatGPT上线以来,人工智能开始成为一股热潮。不少科技界的知名人士都认为,人工智能会让人们的工作更轻松。但是很多一线员工并不...
日期:07-24
创造历史!比亚迪第300万辆新能源车下线_比亚迪第一台新能源
11月16日,比亚迪汽车宣布,第300万辆新能源车正式下线。比亚迪第300万台新能源车是e平台3.0首款纯电轿车海豹,它集合了比亚迪目前最为顶级的技术,足球运动员王霜则成为了该车的车...
日期:11-23