您的位置:首页 > 互联网

算力中心是什么意思「寻找"算力王":智算中心需要怎样的AI服务器(附典型比较)」

发布时间:2024-12-05 20:24:35  来源:互联网     背景:

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较) 通信产业网|2024-11-12 09:30:15作者:胡媛来源:通信产业网

【通信产业网讯】(记者 胡媛)近两年,AI大模型给产业带来了巨大的影响,以GPU为核心的智算逐步成为算力的主要发展方向。据工信部规划,中国智能算力的占比将在2025年达到35%,年复合增长率在30%以上,这意味着智算中心将引领数据中心建设的潮流。

服务器是提供数据存储、运算等服务的高性能计算机,包含处理器、内存、硬盘和其他功能及基础硬件。2024年以来,中国智算中心建设如火如荼,也在不断推动着服务器厂商持续推出加速计算服务器新品。

运营商智算“加速跑”

AI算力基础需求高增,国内供给显著改善。今年以来,运营商开展了大规模的智算中心建设,并开展了几次重要的算力服务器集采。

从资本开支来看,运营商加大算力相关资本开支。公开信息显示,2024年,中国移动算力领域预计投入475亿元,同比增长21.5%,占资本开支比重提升5.8个百分点至27.5%。中国电信产业数字化计划资本开支370亿元,同比增长4.1%,在云/算力计划投资180亿元。中国联通在算网数智投资方面将坚持适度超前、加快布局,但是未披露具体数额。可以看出,中国移动暂时拔得头筹,中国电信和中国联通紧随其后。

此外,财报显示,到2024年底,中国电信智算算力规模将大幅领先,中国移动次之。中国电信计划2024年智算算力提升10EFLOPS,超过21EFLOPS。中国移动2024年智算算力累计超过17EFLOPS。

从运营商积极布局智算中心来看,据不完全统计,目前,国内建成和在建的智算中心项目超500个,运营商为满足市场需求,正加快建设智算中心项目超80个,争夺政企市场。

中国移动优化全国性智算中心和边缘智算节点布局,全网智算规模达到17EFLOPS(FP16),年内将投产3个近两万卡超大规模单体智算中心和12个区域智算中心。中国电信适度超前建设智算基础设施,持续加大智算能力建设,规划并建设全国“2+3+7+X”公共智算云池,在京津冀、长三角地区建设两大万卡智算集群,西部地区打造大规模绿色智算池。中国联通布局热点集约、跨区辐射、边缘覆盖的多级算力体系,构建了“1+ N+X”全国分梯次智算资源,IDC规模超40万架,云池覆盖230多个城市。

从运营商招标项目来看,2024年4月,中国移动发布2024年至2025年新型智算中心采购招标公告,此次采购包含AI服务器7994台,成为有史以来国内最大规模的AI服务器集采。加上此前中国移动2023年至2024年新型智算中心(试验网)集采项目,12个标包对应AI训练服务器采购量总计达到2454台,中国移动这两次AI服务器集采规模合计超万台。

除了中国移动之外,其他两大运营商此前也开启了AI服务器大规模采购。中国联通在今年3月启动2024年人工智能服务器集采,其中,人工智能服务器采购总规模为2503台。中国电信在去年10月也采购了4175台AI服务器。以算力基础设施来说,在大模型产品迭代发展中,算力需求持续增长,带动AI服务器的需求居高不下。

智算中心概念股

AI服务器市场竞争激烈

在智算中心的建设中,服务器的选择至关重要,它直接关系到算力的强弱、任务的执行效率以及资源的利用率。一般来讲,智算中心的服务器主要包括训练服务器、推理服务器或训推一体服务器等三大类。

训练服务器主要利用大量数据对AI模型进行训练,通过调整模型参数使模型更好地拟合数据,学习数据中的特征和规律。这通常需要高性能的硬件支持,如高性能GPU或TPU(张量处理单元),以及大容量内存和高速存储设备。此类服务器的特点是适用于模型开发和训练阶段,需要强大的计算能力和长时间的稳定运行。  

推理服务器主要功能是对输入数据进行快速推理计算,生成预测结果。这通常用于实时应用场景,如自动驾驶、实时语音识别等。这类服务器特点是要求低延迟、高可靠性,通常采用低功耗的GPU或专用的推理芯片,如NVIDIA的TensorRT系列芯片,在保证推理速度的同时降低能耗和成本。

训推一体服务器是既能进行模型训练又能进行推理计算的服务器。它的特点是资源利用率高,可以根据实际需求灵活分配计算和存储资源。但设计和维护成本也相对较高,需要解决CPU和GPU之间的算力融合问题,以及不同任务之间的资源调度问题。

算力智库

俄罗斯苹果手机被限制

针对智算中心存在的算力融合、算力孤岛、算力低效、硬件投资与更新、网络与管理等问题,在智算中心的建设中,服务器的选择应根据实际需求进行权衡。训练服务器适用于模型开发和训练阶段,推理服务器适用于实时应用场景,而训推一体服务器则可以在两者之间实现灵活切换和资源共享。

与此同时,智算服务器与传统通用服务器最大的区别,在于算力芯片的不同。智算服务器为了保证操作系统运行,也配置了CPU。但是,为了更好地完成AI计算任务,配置了更多的GPU、NPU(神经网络处理单元)、TPU等计算芯片(4块或8块),以这些芯片输出的算力为主。

除了芯片不同之外,为了充分发挥性能以及保障稳定运行,AI服务器在架构、存储、散热、拓扑等方面也进行了强化设计。例如,智算服务器的DRAM容量通常是普通服务器的8倍,NAND容量是普通服务器的3倍,甚至它的PCB电路板层数也明显多于传统服务器。

大模型发展带来了对超大规模算力、高性能存储、超大规模算力调度及管理、绿色节能等技术能力的需求。算力中心当前阶段,规模属于万卡集群、体量大,服务器采购要多型号、多厂家,配套液冷需要专业液冷供应商提供,来解决其解耦交付痛点。

超聚变推出FusionPoD for AI整机柜液冷服务器,从双生态、多样性算力、绿色低碳方面全方位重构智算底座,为智算集群需求打造高密、坚实、开放平台。中兴通讯推出的新互联AI服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。新华三新发布的H3C UniServer G7系列依托面向AI的可进化架构、内生AI的操作系统和管理中枢,以及拥抱AGI的多元算力体系,为用户提供了灵活、高效、绿色的算力支持。浪潮元脑服务器NF5898G8,在AI算力方面具有强大的兼容性和卓越的性能,进一步加速算力融合创新。联想新一代Neptune海神液冷服务器,允许AI和HPC客户在不需要专门的数据中心空调的情况下运行100千瓦以上的服务器机架,98%的热量将转移到水循环中。信维全新推出的AI训推服务器H8650G5I提供不同的散热SKU,包括空气冷却和液体冷却解决方案。

对于服务器厂商而言,当其身量已不再局限于提供单一硬件产品时,而是提供综合性解决方案,这些解决方案可能包括服务器、存储、网络、安全等方面。未来,智算服务器将采用更高效的能源使用方式,实现绿色计算,并加强数据和模型的保护措施,以确保数据的安全性和隐私性。

责任编辑:胡媛

威马汽车w6卖了多少台

the journey of a plastic bottle


返回网站首页

本文评论
37182亿元!苹果重回全球品牌价值500强榜首_苹果全球售价排行榜
快科技1月17日消息,据媒体报道,今天,国际著名第三方品牌价值评估咨询机构Brand Finance,发布了2024年全球品牌价值500强,苹果以5166亿美元(约合37182亿元人民币)位列全球第1位。iqo...
日期:01-18
有人花万元求购!任天堂闹钟遭疯抢:原价仅605元_任天堂ns如何设置闹钟
快科技10月23日消息,日前,任天堂发布硬件新品Alarmo闹钟,可以自选不同的游戏主题与闹钟音乐,定价12980日元(约合605元人民币)。新品发布后便吸引了大量粉丝抢购,由于Alarmo订单较多...
日期:10-23
睿帆科技亮相2023第七届世界智能大会,一展数据智能魅力
5 月18- 21 日,由国家发改委、科技部、工信部、广电总局、网信办、中科院、工程院、中国科协和天津市政府共同主办的第七届世界智能大会在天津隆重举办,本届大会以“智行天下...
日期:05-22
销售超500万杯,​奈雪超大桶凭什么受欢迎?
声明:本文来自于微信公众号 营销兵法(ID:lanhaiyingxiao),作者:兵法先生,授权转载发布。新茶饮无疑是近年的热门品类之一,市场容量大、用户关注度高、营销花样多以及受到资本的追...
日期:07-02
徐少强武状元苏乞儿剧照「香港武侠明星徐少强去世:曾出演《武状元苏乞儿》大反派」
又一位香港明星离开了我们!美团港股发行价据报道,香港武侠明星徐少强于9月15日因食道癌不幸离世,享年73岁。徐少强的女儿徐颕堃回应称多谢关心”,并分享了张学友《你是我今生唯...
日期:09-15
央视联合上海人工智能实验室发布央视听媒体大模型CMG Media GPT
7月24日 消息:7月20日,上海人工智能实验室(上海AI实验室)、中央广播电视总台联合发布“央视听媒体大模型”(CMG Media GPT)。目前,央视听大模型具备了强大的视频理解能力和视听...
日期:07-24
星纪时代和魅族的合作代表什么星纪魅族携手时空道宇将合作发射幸运星号卫星
来源:中关村在线近日,星纪魅族与时空道宇达成战略合作,双方将合作发射“星纪魅族幸运星号”卫星,携手推进全球智能科技生态建设,带着全球用户的“星愿”共同探索星辰大海。“星纪...
日期:09-02
前美团高级副总裁郭庆成京东顾问,或将助力即时零售和机器人业务
1月19日消息,有媒体消息称,加入机器人创业大军2年多后,前美团高级副总裁郭庆又有了新动向。swift playgrounds ios版本网易科技从接近京东的人士了解,前美团高级副总裁郭庆成京...
日期:01-20
广东广电网络三角营业厅电话「中国广电服务延伸至三沙市」
11月23日,中国广电股份旗下中国有线海南分公司三沙服务站挂牌仪式在三沙市永兴岛举行。三沙服务站的设立,标志着中国广电服务已延伸至祖国最南端,这是中国广电贯彻落实习近平新...
日期:11-28
车载冰箱里装的都是0糖苏打水-雷军称管理身材要从细节做起_车载冰箱用加水在里面吗
快科技5月26日消息,日前,雷军在抖音上介绍小米SU7车载冰箱时,拿起一罐饮料表示:“你看看,都是0糖的,所以管理身材要从细节做起”。比亚迪汽车工业园落户深汕合作区redmi k60 pro为...
日期:05-26
传音手机在印度采取了什么策略「传音回应在印度被高通诉专利侵权:已签署并履行协议」
快科技7月13日消息,近日有报道称,高通正在印度德里高等法院起诉传音控股集团,控告后者侵犯其四项非标准必要专利。传音对此回应称,已与高通签署了5G标准专利许可协议并正在履行...
日期:07-13
售价或不到2800元 老黄良心?,RTX-4060 Ti真来了 下月发布/开卖
4月19日消息,据Digtimes报道称,NV已经做好准备,RTX 4060 Ti、RTX 4060将会在5月份发布。对于RTX 4060 Ti首次采用AD106核心,集成4352个流处理器,RTX 4060 则是AD107小核心,集成307...
日期:10-02
马斯克被告「马斯克起诉OpenAI 和CEO奥特曼 微软还能躺赢吗?」
【】3月1日消息,昔日并肩作战,今日法院相见!OpenAI的发起人之一特斯拉CEO埃隆·马斯克(Elon Musk)向旧金山高等法院提起诉讼,以违反合同为由起诉OpenAI及其CEO萨姆·奥特曼(Sam Alt...
日期:03-02
杭州阿里巴巴由122亿减资至1亿 官方回应:系公司正常工商登记变更
最近,杭州阿里巴巴网络科技有限公司发生工商变更,将注册资本从122亿元人民币减少到大约1.05亿元人民币。该公司成立于2018年3月,法定代表人、董事长兼总经理为张勇,淘宝(中国)软件...
日期:04-07
《孤注一掷》破30亿!张艺兴创影坛历史、金晨成30亿票房女主
8月23日消息,最近热映的电影《孤注一掷》票房一路飙升,目前已突破30亿元大关,口碑、票房双收,成为今年最佳电影之一。谷歌pixel3xl屏幕在票房突破30亿的同时,《孤注一掷》主演张...
日期:08-23
陕西降温原因「陕西立夏后突然又降雪 游客只穿了短袖冻惨:专家释疑罕见气候」
5月21日,有自驾游游客在陕西榆林市靖边县到志丹县国道上遇到大雪,而当天是立夏后突然降雪,也让人感到很突然。22日,该游客表示,当时只穿了短袖和防晒衣,没料到气温骤降下起大雪。...
日期:05-22
微软Xbox掌门人斯宾塞:性能升级主机目前没必要_斯宾塞 游戏说
快科技6月12日消息,在上世代,微软和索尼纷纷选择在主机推出三年之后,推出半代升级版主机。折叠机哪款好苹果有必要更新15但在今天凌晨的Xbox发布会上,Xbox部门掌门人菲尔斯宾塞...
日期:06-12
手机介绍_oppo手机介绍
随着科技的不断发展,手机已经成为人们生活中必不可少的物品。在市场上,各种各样的手机层出不穷,每个品牌的手机都有自己独特的卖点和特点。本文将就手机介绍进行搜集相关信息,并...
日期:05-29
特斯拉fsd10.0「千万别选6.4W FSD!特斯拉硬件根本不值钱」
中关村在线消息:10月11日,据相关爆料,特斯拉的FSD选装费用为6.4万元,选装FSD后不仅会有更好的硬件支持,还会匹配更好的软件系统。但是,即便大家花了更高的钱选择了这项功能,仅是体...
日期:10-14
最新华为折叠屏上市时间「华为全新折叠屏旗舰上架 现在就能预约抢购」
中关村在线消息:华为将于近期发布竖向折叠屏手机P50宝盒的升级版Pocket S,目前这台折叠屏新机已经上架京东商城,并开启了预约抢购活动,感兴趣的朋友可以提前预约,点击链接即可了...
日期:11-02