您的位置:首页 > 互联网

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较)_智算中心概念股

发布时间:2024-12-31 00:00:28  来源:互联网     背景:

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较) 通信产业网|2024-11-12 09:30:15作者:胡媛来源:通信产业网

智算中心概念股

【通信产业网讯】(记者 胡媛)近两年,AI大模型给产业带来了巨大的影响,以GPU为核心的智算逐步成为算力的主要发展方向。据工信部规划,中国智能算力的占比将在2025年达到35%,年复合增长率在30%以上,这意味着智算中心将引领数据中心建设的潮流。

服务器是提供数据存储、运算等服务的高性能计算机,包含处理器、内存、硬盘和其他功能及基础硬件。2024年以来,中国智算中心建设如火如荼,也在不断推动着服务器厂商持续推出加速计算服务器新品。

特斯拉 美股 新浪

运营商智算“加速跑”

AI算力基础需求高增,国内供给显著改善。今年以来,运营商开展了大规模的智算中心建设,并开展了几次重要的算力服务器集采。

从资本开支来看,运营商加大算力相关资本开支。公开信息显示,2024年,中国移动算力领域预计投入475亿元,同比增长21.5%,占资本开支比重提升5.8个百分点至27.5%。中国电信产业数字化计划资本开支370亿元,同比增长4.1%,在云/算力计划投资180亿元。中国联通在算网数智投资方面将坚持适度超前、加快布局,但是未披露具体数额。可以看出,中国移动暂时拔得头筹,中国电信和中国联通紧随其后。

此外,财报显示,到2024年底,中国电信智算算力规模将大幅领先,中国移动次之。中国电信计划2024年智算算力提升10EFLOPS,超过21EFLOPS。中国移动2024年智算算力累计超过17EFLOPS。

从运营商积极布局智算中心来看,据不完全统计,目前,国内建成和在建的智算中心项目超500个,运营商为满足市场需求,正加快建设智算中心项目超80个,争夺政企市场。

中国移动优化全国性智算中心和边缘智算节点布局,全网智算规模达到17EFLOPS(FP16),年内将投产3个近两万卡超大规模单体智算中心和12个区域智算中心。中国电信适度超前建设智算基础设施,持续加大智算能力建设,规划并建设全国“2+3+7+X”公共智算云池,在京津冀、长三角地区建设两大万卡智算集群,西部地区打造大规模绿色智算池。中国联通布局热点集约、跨区辐射、边缘覆盖的多级算力体系,构建了“1+ N+X”全国分梯次智算资源,IDC规模超40万架,云池覆盖230多个城市。

从运营商招标项目来看,2024年4月,中国移动发布2024年至2025年新型智算中心采购招标公告,此次采购包含AI服务器7994台,成为有史以来国内最大规模的AI服务器集采。加上此前中国移动2023年至2024年新型智算中心(试验网)集采项目,12个标包对应AI训练服务器采购量总计达到2454台,中国移动这两次AI服务器集采规模合计超万台。

除了中国移动之外,其他两大运营商此前也开启了AI服务器大规模采购。中国联通在今年3月启动2024年人工智能服务器集采,其中,人工智能服务器采购总规模为2503台。中国电信在去年10月也采购了4175台AI服务器。以算力基础设施来说,在大模型产品迭代发展中,算力需求持续增长,带动AI服务器的需求居高不下。

库克称苹果永远不会垄断

AI服务器市场竞争激烈

在智算中心的建设中,服务器的选择至关重要,它直接关系到算力的强弱、任务的执行效率以及资源的利用率。一般来讲,智算中心的服务器主要包括训练服务器、推理服务器或训推一体服务器等三大类。

训练服务器主要利用大量数据对AI模型进行训练,通过调整模型参数使模型更好地拟合数据,学习数据中的特征和规律。这通常需要高性能的硬件支持,如高性能GPU或TPU(张量处理单元),以及大容量内存和高速存储设备。此类服务器的特点是适用于模型开发和训练阶段,需要强大的计算能力和长时间的稳定运行。  

推理服务器主要功能是对输入数据进行快速推理计算,生成预测结果。这通常用于实时应用场景,如自动驾驶、实时语音识别等。这类服务器特点是要求低延迟、高可靠性,通常采用低功耗的GPU或专用的推理芯片,如NVIDIA的TensorRT系列芯片,在保证推理速度的同时降低能耗和成本。

训推一体服务器是既能进行模型训练又能进行推理计算的服务器。它的特点是资源利用率高,可以根据实际需求灵活分配计算和存储资源。但设计和维护成本也相对较高,需要解决CPU和GPU之间的算力融合问题,以及不同任务之间的资源调度问题。

针对智算中心存在的算力融合、算力孤岛、算力低效、硬件投资与更新、网络与管理等问题,在智算中心的建设中,服务器的选择应根据实际需求进行权衡。训练服务器适用于模型开发和训练阶段,推理服务器适用于实时应用场景,而训推一体服务器则可以在两者之间实现灵活切换和资源共享。

与此同时,智算服务器与传统通用服务器最大的区别,在于算力芯片的不同。智算服务器为了保证操作系统运行,也配置了CPU。但是,为了更好地完成AI计算任务,配置了更多的GPU、NPU(神经网络处理单元)、TPU等计算芯片(4块或8块),以这些芯片输出的算力为主。

除了芯片不同之外,为了充分发挥性能以及保障稳定运行,AI服务器在架构、存储、散热、拓扑等方面也进行了强化设计。例如,智算服务器的DRAM容量通常是普通服务器的8倍,NAND容量是普通服务器的3倍,甚至它的PCB电路板层数也明显多于传统服务器。

大模型发展带来了对超大规模算力、高性能存储、超大规模算力调度及管理、绿色节能等技术能力的需求。算力中心当前阶段,规模属于万卡集群、体量大,服务器采购要多型号、多厂家,配套液冷需要专业液冷供应商提供,来解决其解耦交付痛点。

超聚变推出FusionPoD for AI整机柜液冷服务器,从双生态、多样性算力、绿色低碳方面全方位重构智算底座,为智算集群需求打造高密、坚实、开放平台。中兴通讯推出的新互联AI服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。新华三新发布的H3C UniServer G7系列依托面向AI的可进化架构、内生AI的操作系统和管理中枢,以及拥抱AGI的多元算力体系,为用户提供了灵活、高效、绿色的算力支持。浪潮元脑服务器NF5898G8,在AI算力方面具有强大的兼容性和卓越的性能,进一步加速算力融合创新。联想新一代Neptune海神液冷服务器,允许AI和HPC客户在不需要专门的数据中心空调的情况下运行100千瓦以上的服务器机架,98%的热量将转移到水循环中。信维全新推出的AI训推服务器H8650G5I提供不同的散热SKU,包括空气冷却和液体冷却解决方案。

对于服务器厂商而言,当其身量已不再局限于提供单一硬件产品时,而是提供综合性解决方案,这些解决方案可能包括服务器、存储、网络、安全等方面。未来,智算服务器将采用更高效的能源使用方式,实现绿色计算,并加强数据和模型的保护措施,以确保数据的安全性和隐私性。

spacex发射53颗卫星

责任编辑:胡媛

智算平台


返回网站首页

本文评论
火域管家:强大免费的企业微信社群管理工具,助你盘活私域流量池
  经历对wetool的严打之后,腾讯对企微的辅助工具似乎更宽容,甚至直接与各种第三方平台合作推出辅助工具,企微是作为一个平台开放,他们只要专注于提供和开放能力即可,这就跟商...
日期:07-10
EleutherAI发布最新模型Pile-T5 解决代码处理相关任务局限性
4月16日 消息:EleutherAI最近发布了一款新的T5模型,名为Pile-T5,旨在解决原始T5模型在处理代码相关任务时的局限性,以及其分词器可能遗漏重要代码标记的问题。Pile-T5模型的推...
日期:04-16
45天涨粉429万,这届年轻人爱上了东北姥姥_东北姥爷搞笑视频
声明:本文来自于微信公众号新榜(ID:newrankcn),作者:云飞扬,授权转载发布。可能成成也没想到,为姥姥开设的账号“八零徐姥姥”会火得那么快。9月2日,“八零徐姥姥”发布视频,记录了...
日期:10-19
美团外卖2020年财报_美团将于8月26日公布2022年第二季度财报
英特尔加快AI芯片交付抢市场,与英伟达竞争升级eos r5与索尼a7r4 查看最新行情   讯 8月16日下午消息,美团(香港联交所股份代号03690)今日宣布该公司将于20...
日期:08-17
苹果又面临集体诉讼-微晚报,马斯克回应中国消费者冷落特斯拉_马斯克否认曾想当苹果ceo
今日要闻一览:马斯克回应“特斯拉遭中国消费者冷落”:上海工厂正以最大产能运行华为三折叠手机预约量突破266万 余承东:华为巅峰之作华兴资本控股今日复牌,股价跌超60%苹果又面...
日期:09-09
点亮“光之眼”| 长飞公司推出激光雷达用全系列特种光纤产品解决方案
通信世界网消息(CWW)近年来,随着自动驾驶、遥感探测、测距测绘的高速发展,车载激光雷达成为越来越重要的传感器之一,备受行业关注。基于光纤放大器的1.5μm半导体激光器已逐渐成...
日期:09-22
音量和电源按钮重新设计 用户失望_苹果正积极研发新交互方式
来源:中关村在线苹果在2021年9月的“好奇心上头”活动中发布了iPhone 15 Pro系列机型,但令部分用户感到失望的是,Pro机型并未整合触觉音量和电源按钮。据悉,苹果内部正在积极研...
日期:09-21
苹果、谷歌、三星等智能手表表带中含高浓度有毒化学物质-研究_智能手表表带材质
12 月 29 日消息,《环境科学与技术快报》(Environmental Science & Technology Letters)杂志本月发表的一项研究表明,许多流行的智能手表表带中含有高浓度的有毒“永久性化学物...
日期:12-29
《双城之战》第二季中文主题曲《这样很好(Isha's Song)》上线:陈奕迅演唱
今日新闻:applewatch最合适的运动app《英雄联盟:双城之战》动画第二季正式回归,备受期待的中文主题曲《这样很好(Ishas Song)》现已上线。由实力唱将陈奕迅深情献唱,谱写动人旋律...
日期:12-20
听泉现代文阅读理解答案「千万级网红"听泉鉴宝"停播内背后:供货商被列入异常经营名单」
html网红听泉鉴宝遭质疑,学历和藏品成焦点继知名网红后,拥有超过 2500 万粉丝的抖音博主听泉鉴宝也引发争议,其学历真实性和藏品问题受到关注。苹果将出现更多广告目前,听泉鉴宝...
日期:10-20
家里总有角落Wi-Fi信号不好?不知道如何下手,看这篇攻略就对了_房间角落wifi信号差
一进卫生间视频通话就会卡顿、躺在卧室追剧主角卡成马赛克、离开客厅打游戏瞬间化身高ping战士……这是许多消费者家中存在的网络困扰,但实现全屋Wi-Fi无死角很简单。京东发...
日期:09-25
迪士尼ceo的自述「迪士尼CEO任期延至2026年,致力于完成转型目标和寻找接班人」
7月13日 消息:据国外媒体报道,迪士尼公司现任首席执行官鲍勃・伊格尔的任期将延长两年,至2026年。这一决定是为了确保公司能够顺利完成转型计划,并找到合适的接班人。迪士尼董...
日期:07-13
一对夫妇做短剧每月进账4亿多 携手创业已有十余年_一对夫妇拍的纪录片
据21财经报道,在热闹的春节档,短剧市场涌现出多部爆款作品,其中《我在八零年代当后妈》等剧集尤为引人注目。这些短剧在上线当日便取得了惊人的成绩,充值金额高达2000万元。点众...
日期:03-11
16s支持wifi6吗「网速稳了!曝苹果iPhone 16将支持Wi-Fi 7无线」
据爆料大神郭明錤透露,明年发布的iPhone 16系列手机将升级到Wi-Fi 7标准。相比于现在的Wi-Fi 6,Wi-Fi 7标准加入了诸多新技术特性,能够提供更高的数据传输速率和更低的时延,避免...
日期:06-20
俄罗斯呼吁本国iPhone用户彻查手机 存在后门:苹果回应永远不会_俄罗斯让用苹果手机
据俄罗斯卫星通讯社报道,该国已经禁止俄罗斯公务人员在工作中使用苹果手机。对于为何这样做,报道中提到,俄罗斯有数千部苹果手机被侵入,这是厂商所设后门程序运行造成的,而官方也...
日期:06-04
计划Q4发布 华为余承东,问界-M9 将重新定义1000万以下最好的智能SUV车型
4 月 17 日消息,在今日发布会的最后,华为为大家带来了曝光已久的问界 M9!这款新车预计会在第四季度发布,但现在就已经开启 5000 元意向金预订,预售价 48-60 万元。问界 M9 车长...
日期:10-02
77万!超跑极氪王开卖,零百2秒级,CEO:别人五年内造不出来
拥有F1冠军同款驾驶模式作者|王磊“友商们,五年之内也造不出来!”是谁凭一款车,就敢叫板整个汽车圈?极氪001 FR,刚刚正式上市,这款车虽然外观和极氪001 差不多,但动力迎来巨大升级。...
日期:10-28
如果“室温超导”落地,磁悬浮列车会多如高铁,量子计算机可随身带
“让即便是小如iPhone的设备,都能拥有与量子电脑匹敌的计算能力。”图片来源:Pixabay漫步者真无线耳机lollipods评测《阿凡达》中,吸引人类不惜一切代价,哪怕摧毁外星人的家园,也...
日期:08-05
小米汽车无缝支持iPad 网友点赞:格局打开_小米车载无线充电器适合哪些机型
快科技12月28日消息,在小米汽车技术发布会上,小米宣布,小米汽车无缝支持苹果设备。官方介绍,支持iPad后排扩展,用户可以使用iPad控制空调、音乐和座椅等。与此同时,小米汽车支持无...
日期:12-28
马斯克明确火星时间表:2年星舰起飞 4年载人飞行 20年殖民地_马斯克火星着陆
2年后发射星舰,4年内载人火星飞行!马斯克透露最新火星计划,并表示将在20年内建立人类据点。老马这条动态下面瞬间炸了锅,网友们说啥的都有:抵制画饼型网友:似曾相识的感jio,这题我...
日期:09-10