您的位置:首页 > 互联网

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较)_智算中心概念股

发布时间:2024-12-23 22:15:31  来源:互联网     背景:

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较) 通信产业网|2024-11-12 09:30:15作者:胡媛来源:通信产业网

【通信产业网讯】(记者 胡媛)近两年,AI大模型给产业带来了巨大的影响,以GPU为核心的智算逐步成为算力的主要发展方向。据工信部规划,中国智能算力的占比将在2025年达到35%,年复合增长率在30%以上,这意味着智算中心将引领数据中心建设的潮流。

服务器是提供数据存储、运算等服务的高性能计算机,包含处理器、内存、硬盘和其他功能及基础硬件。2024年以来,中国智算中心建设如火如荼,也在不断推动着服务器厂商持续推出加速计算服务器新品。

运营商智算“加速跑”

AI算力基础需求高增,国内供给显著改善。今年以来,运营商开展了大规模的智算中心建设,并开展了几次重要的算力服务器集采。

从资本开支来看,运营商加大算力相关资本开支。公开信息显示,2024年,中国移动算力领域预计投入475亿元,同比增长21.5%,占资本开支比重提升5.8个百分点至27.5%。中国电信产业数字化计划资本开支370亿元,同比增长4.1%,在云/算力计划投资180亿元。中国联通在算网数智投资方面将坚持适度超前、加快布局,但是未披露具体数额。可以看出,中国移动暂时拔得头筹,中国电信和中国联通紧随其后。

此外,财报显示,到2024年底,中国电信智算算力规模将大幅领先,中国移动次之。中国电信计划2024年智算算力提升10EFLOPS,超过21EFLOPS。中国移动2024年智算算力累计超过17EFLOPS。

从运营商积极布局智算中心来看,据不完全统计,目前,国内建成和在建的智算中心项目超500个,运营商为满足市场需求,正加快建设智算中心项目超80个,争夺政企市场。

中国移动优化全国性智算中心和边缘智算节点布局,全网智算规模达到17EFLOPS(FP16),年内将投产3个近两万卡超大规模单体智算中心和12个区域智算中心。中国电信适度超前建设智算基础设施,持续加大智算能力建设,规划并建设全国“2+3+7+X”公共智算云池,在京津冀、长三角地区建设两大万卡智算集群,西部地区打造大规模绿色智算池。中国联通布局热点集约、跨区辐射、边缘覆盖的多级算力体系,构建了“1+ N+X”全国分梯次智算资源,IDC规模超40万架,云池覆盖230多个城市。

从运营商招标项目来看,2024年4月,中国移动发布2024年至2025年新型智算中心采购招标公告,此次采购包含AI服务器7994台,成为有史以来国内最大规模的AI服务器集采。加上此前中国移动2023年至2024年新型智算中心(试验网)集采项目,12个标包对应AI训练服务器采购量总计达到2454台,中国移动这两次AI服务器集采规模合计超万台。

荣耀v40提前曝光

除了中国移动之外,其他两大运营商此前也开启了AI服务器大规模采购。中国联通在今年3月启动2024年人工智能服务器集采,其中,人工智能服务器采购总规模为2503台。中国电信在去年10月也采购了4175台AI服务器。以算力基础设施来说,在大模型产品迭代发展中,算力需求持续增长,带动AI服务器的需求居高不下。

AI服务器市场竞争激烈

在智算中心的建设中,服务器的选择至关重要,它直接关系到算力的强弱、任务的执行效率以及资源的利用率。一般来讲,智算中心的服务器主要包括训练服务器、推理服务器或训推一体服务器等三大类。

算力服务是什么

训练服务器主要利用大量数据对AI模型进行训练,通过调整模型参数使模型更好地拟合数据,学习数据中的特征和规律。这通常需要高性能的硬件支持,如高性能GPU或TPU(张量处理单元),以及大容量内存和高速存储设备。此类服务器的特点是适用于模型开发和训练阶段,需要强大的计算能力和长时间的稳定运行。  

华为支持双卡5G的手机

推理服务器主要功能是对输入数据进行快速推理计算,生成预测结果。这通常用于实时应用场景,如自动驾驶、实时语音识别等。这类服务器特点是要求低延迟、高可靠性,通常采用低功耗的GPU或专用的推理芯片,如NVIDIA的TensorRT系列芯片,在保证推理速度的同时降低能耗和成本。

训推一体服务器是既能进行模型训练又能进行推理计算的服务器。它的特点是资源利用率高,可以根据实际需求灵活分配计算和存储资源。但设计和维护成本也相对较高,需要解决CPU和GPU之间的算力融合问题,以及不同任务之间的资源调度问题。

针对智算中心存在的算力融合、算力孤岛、算力低效、硬件投资与更新、网络与管理等问题,在智算中心的建设中,服务器的选择应根据实际需求进行权衡。训练服务器适用于模型开发和训练阶段,推理服务器适用于实时应用场景,而训推一体服务器则可以在两者之间实现灵活切换和资源共享。

与此同时,智算服务器与传统通用服务器最大的区别,在于算力芯片的不同。智算服务器为了保证操作系统运行,也配置了CPU。但是,为了更好地完成AI计算任务,配置了更多的GPU、NPU(神经网络处理单元)、TPU等计算芯片(4块或8块),以这些芯片输出的算力为主。

算力中心怎么挣钱

除了芯片不同之外,为了充分发挥性能以及保障稳定运行,AI服务器在架构、存储、散热、拓扑等方面也进行了强化设计。例如,智算服务器的DRAM容量通常是普通服务器的8倍,NAND容量是普通服务器的3倍,甚至它的PCB电路板层数也明显多于传统服务器。

大模型发展带来了对超大规模算力、高性能存储、超大规模算力调度及管理、绿色节能等技术能力的需求。算力中心当前阶段,规模属于万卡集群、体量大,服务器采购要多型号、多厂家,配套液冷需要专业液冷供应商提供,来解决其解耦交付痛点。

超聚变推出FusionPoD for AI整机柜液冷服务器,从双生态、多样性算力、绿色低碳方面全方位重构智算底座,为智算集群需求打造高密、坚实、开放平台。中兴通讯推出的新互联AI服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。新华三新发布的H3C UniServer G7系列依托面向AI的可进化架构、内生AI的操作系统和管理中枢,以及拥抱AGI的多元算力体系,为用户提供了灵活、高效、绿色的算力支持。浪潮元脑服务器NF5898G8,在AI算力方面具有强大的兼容性和卓越的性能,进一步加速算力融合创新。联想新一代Neptune海神液冷服务器,允许AI和HPC客户在不需要专门的数据中心空调的情况下运行100千瓦以上的服务器机架,98%的热量将转移到水循环中。信维全新推出的AI训推服务器H8650G5I提供不同的散热SKU,包括空气冷却和液体冷却解决方案。

对于服务器厂商而言,当其身量已不再局限于提供单一硬件产品时,而是提供综合性解决方案,这些解决方案可能包括服务器、存储、网络、安全等方面。未来,智算服务器将采用更高效的能源使用方式,实现绿色计算,并加强数据和模型的保护措施,以确保数据的安全性和隐私性。

责任编辑:胡媛


返回网站首页

本文评论
小米宣布:这个隐藏功能彻底凉凉「小米的隐藏功能」
小米宣布:这个隐藏功能彻底凉凉最近小米小爱同学团队发了个公告:「定制小爱」功能将在 7 月 10 日正式停运下线。其中「自定义小爱音色和唤醒词」不会受影响。但「定制小爱形...
日期:06-14
运营商财经网康钊:华为轮值董事长忠告:中国芯片制造工艺在相当长时间都将落后
运营商财经 康钊/文近日,在2024华为全联接大会上,华为轮值董事长徐直军坦承:美国在AI芯片领域对中国的制裁长期不会取消,而中国半导体制造工艺由于也受美国制裁,将在相当长时间处...
日期:09-24
百度智能云连拿四年第一,为什么要深耕AI公有云市场_百度智能云合作伙伴
声明:本文来自于微信公众号 脑极体(ID:unity007),作者:风辞远,授权转载发布。AI是过去几年云计算市场中的最大变量,而大模型的成熟,毫无疑问将指数级增强这个变量。记得在2022年年...
日期:07-27
2021索尼游戏发布会什么时候「微软“截胡”索尼发布会:12款游戏新作将登陆Xbox」
快科技5月25日消息,今天凌晨,索尼召开PlayStation Showcase发布会,展示了多款第三方新作的最新消息。但出乎预料的是,在发布会结束后,微软Xbox官方在推特宣布,索尼发布会上公布的...
日期:05-25
苹果13价格变化「郭明錤:苹果 iPhone 14 系列平均涨价 15%,Pro 更贵了」
IT之家 8 月 11 日消息,昨日晚间,天风国际分析师郭明錤通过 Twitter 表示,与 iPhone 13 系列相比,预计苹果 iPhone 14 系列 ASP(Average Selling Price,平均售价)将上涨 15% 左右。...
日期:09-27
大卖2.5亿部!苹果昔日神机iPhone 6二手收购价低至100元_二手苹果六市场价
最近,苹果更新了其过时产品列表,史上最畅销的iPhone系列机型之一iPhone6退休”,正式退出历史舞台,该机型距停售已过去五年多时间。2019年,苹果生产线调整,iPhone6正式停产,5年之间,i...
日期:10-04
贝索斯房产梳理:拥有17万公顷土地 为全美第24大土地所有者
8月18日消息,根据《美国土地报告》杂志(The Land Report)2022年度的排名,美国电商亚马逊创始人杰夫·贝索斯(Jeff Bezos)拥有42万英亩(约合17万公顷)地产,在全美土地所有者中排行第24...
日期:08-18
千万级网红"听泉鉴宝"停播内背后:供货商被列入异常经营名单_听泉解析
html网红听泉鉴宝遭质疑,学历和藏品成焦点镭速传输下载继知名网红后,拥有超过 2500 万粉丝的抖音博主听泉鉴宝也引发争议,其学历真实性和藏品问题受到关注。目前,听泉鉴宝及其相...
日期:12-20
商汤:阿里巴巴全资子公司Taobao已出售所持公司所有B类股份「阿里巴巴ab股权」
凤凰网科技讯 7月21日消息,商汤在港交所发布公告称,公司获阿里巴巴集团控股全资子公司Taobao Holding Limited知会,其已有序出售其于本公司所持的所有B类股份,且截至本公告日期,...
日期:07-21
平均订单52.7万元!极氪CEO安聪慧:大量埃尔法用户置换极氪009「极氪001有置换不补贴吗」
日前,吉利汽车发布的2022年财报显示,旗下豪华智能纯电品牌极氪取得了优异的成绩。2022年,极氪实现营业收入人民币317.9亿元,同比增长10倍多,2022年累计交付71,941辆。并且,极氪001...
日期:03-24
美国研究人员通过AI筛选发现新型抗生素:有望杀灭耐药性细菌_who警告抗生素研发不足 耐药性增强给全球带来危机
IT之家 12 月 25 日消息,据美国麻省理工学院 MIT News 报道,该校布罗德研究所和哈佛大学的研究人员利用深度学习等 AI 技术发现了一类新型抗生素,它可杀灭一类名为“耐甲氧西林...
日期:12-25
“退休期叛逆”也不怕,小度带父母过出不一样的养老新生活
  安享晚年,在多数人看来是父母一辈退休后应有的姿态,每天以养生为主,以花鸟鱼虫作伴,以带孙子为乐……一片岁月静好,叛逆似乎和他们没关系。然而,近年来一个有趣的现象正在悄...
日期:07-10
告别“花架子”,探索更精简高效的收费站站级交易系统「收费站杆子叫什么名称」
一周前,第 25 届中国高速公路信息化大会暨技术产品博览在福州海峡国际会展中心落幕。一年一度的行业顶 级盛会给我们传递了新的风向之变:一、方案下沉多了,贪大求全少了过往解...
日期:04-11
吉利汽车:10 月总计销量 152263 辆 同比增长 36%_吉利汽车2017.10月销量
11月7日消息:吉利汽车公布,该集团于2022年10月的总销量为约15.23万部,较去年同期增长约36%及较2022年9月增长约17%。1-10月累计销量约114.19万部,同比增长10%。华为手机行业占...
日期:11-13
高通 qup「高通推出Androidon Snapdragon:打造下一代Android应用的全新工具」
近日,高通技术公司面向Android应用开发者推出全新工具——Androidon Snapdragon。这一新网站将重点介绍最新的骁龙前沿技术,并提供如何在Android应用中使用这些技术的指导。高...
日期:06-16
德州地震局「山东德州平原发生5.5级地震,中国电信抗震救灾在行动」
通信世界网消息(CWW)8月6日2时33分,山东省德州市平原县发生5.5级地震。地震发生后,中国电信山东公司快速响应,立即开展应急调度。紧急调度济南应急通信车(携带2部卫星电话)赶赴平原...
日期:08-06
你家电视多少钱?我国电视均价已达3733元 75寸以下全面下滑_现在电视价格是多少
快科技7月9日消息,根据洛图科技(RUNTO)零售监测数据,今年上半年,中国电视市场平均单价达到3733元,同比增长14.7%。在线上市场,1500元及以上价格段的销量份额同比全线增长了1到4个百...
日期:07-09
让在线面试更多面:猎聘“多面”视频面试软件(猎聘网视频面试)
  面试是所有企业招聘中必不可少的一个环节。传统面试往往会耗费应聘者和招聘者许多不必要的开销和诸多宝贵时间,而猎聘的在线视频招聘软件——多面,可以轻松解决日常的招...
日期:09-01
警方数次预警仍不听劝!男子网上寻觅佳人被骗47万元_女子网上被骗
  作者| 潘从武 通讯员 甘雯;编辑|王芳 李金凤;丁兆汝  来源:法治日报m2芯片的macbook pro新能源车所用的典型材料  2022年9月28日,庞先生在新疆乌鲁木齐市公安局沙依巴克...
日期:10-03
信通院金键:加速标识贯通,赋能新型工业化高质量发展_信通院 金键
通信世界网消息(CWW)工业互联网是第四次工业革命的重要基石,是数字经济与实体经济深度融合的关键底座,是新型工业化的战略性基础设施。2023年12月14日,工业互联网标识贯通创新发...
日期:01-31