您的位置:首页 > 互联网

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较)_算力中心怎么挣钱

发布时间:2024-12-23 07:24:27  来源:互联网     背景:

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较) 通信产业网|2024-11-12 09:30:15作者:胡媛来源:通信产业网

【通信产业网讯】(记者 胡媛)近两年,AI大模型给产业带来了巨大的影响,以GPU为核心的智算逐步成为算力的主要发展方向。据工信部规划,中国智能算力的占比将在2025年达到35%,年复合增长率在30%以上,这意味着智算中心将引领数据中心建设的潮流。

服务器是提供数据存储、运算等服务的高性能计算机,包含处理器、内存、硬盘和其他功能及基础硬件。2024年以来,中国智算中心建设如火如荼,也在不断推动着服务器厂商持续推出加速计算服务器新品。

运营商智算“加速跑”

AI算力基础需求高增,国内供给显著改善。今年以来,运营商开展了大规模的智算中心建设,并开展了几次重要的算力服务器集采。

从资本开支来看,运营商加大算力相关资本开支。公开信息显示,2024年,中国移动算力领域预计投入475亿元,同比增长21.5%,占资本开支比重提升5.8个百分点至27.5%。中国电信产业数字化计划资本开支370亿元,同比增长4.1%,在云/算力计划投资180亿元。中国联通在算网数智投资方面将坚持适度超前、加快布局,但是未披露具体数额。可以看出,中国移动暂时拔得头筹,中国电信和中国联通紧随其后。

快讯小米头戴设备专利获授权

此外,财报显示,到2024年底,中国电信智算算力规模将大幅领先,中国移动次之。中国电信计划2024年智算算力提升10EFLOPS,超过21EFLOPS。中国移动2024年智算算力累计超过17EFLOPS。

从运营商积极布局智算中心来看,据不完全统计,目前,国内建成和在建的智算中心项目超500个,运营商为满足市场需求,正加快建设智算中心项目超80个,争夺政企市场。

中国移动优化全国性智算中心和边缘智算节点布局,全网智算规模达到17EFLOPS(FP16),年内将投产3个近两万卡超大规模单体智算中心和12个区域智算中心。中国电信适度超前建设智算基础设施,持续加大智算能力建设,规划并建设全国“2+3+7+X”公共智算云池,在京津冀、长三角地区建设两大万卡智算集群,西部地区打造大规模绿色智算池。中国联通布局热点集约、跨区辐射、边缘覆盖的多级算力体系,构建了“1+ N+X”全国分梯次智算资源,IDC规模超40万架,云池覆盖230多个城市。

从运营商招标项目来看,2024年4月,中国移动发布2024年至2025年新型智算中心采购招标公告,此次采购包含AI服务器7994台,成为有史以来国内最大规模的AI服务器集采。加上此前中国移动2023年至2024年新型智算中心(试验网)集采项目,12个标包对应AI训练服务器采购量总计达到2454台,中国移动这两次AI服务器集采规模合计超万台。

除了中国移动之外,其他两大运营商此前也开启了AI服务器大规模采购。中国联通在今年3月启动2024年人工智能服务器集采,其中,人工智能服务器采购总规模为2503台。中国电信在去年10月也采购了4175台AI服务器。以算力基础设施来说,在大模型产品迭代发展中,算力需求持续增长,带动AI服务器的需求居高不下。

中兴通讯新浪财经

AI服务器市场竞争激烈

在智算中心的建设中,服务器的选择至关重要,它直接关系到算力的强弱、任务的执行效率以及资源的利用率。一般来讲,智算中心的服务器主要包括训练服务器、推理服务器或训推一体服务器等三大类。

训练服务器主要利用大量数据对AI模型进行训练,通过调整模型参数使模型更好地拟合数据,学习数据中的特征和规律。这通常需要高性能的硬件支持,如高性能GPU或TPU(张量处理单元),以及大容量内存和高速存储设备。此类服务器的特点是适用于模型开发和训练阶段,需要强大的计算能力和长时间的稳定运行。  

推理服务器主要功能是对输入数据进行快速推理计算,生成预测结果。这通常用于实时应用场景,如自动驾驶、实时语音识别等。这类服务器特点是要求低延迟、高可靠性,通常采用低功耗的GPU或专用的推理芯片,如NVIDIA的TensorRT系列芯片,在保证推理速度的同时降低能耗和成本。

训推一体服务器是既能进行模型训练又能进行推理计算的服务器。它的特点是资源利用率高,可以根据实际需求灵活分配计算和存储资源。但设计和维护成本也相对较高,需要解决CPU和GPU之间的算力融合问题,以及不同任务之间的资源调度问题。

针对智算中心存在的算力融合、算力孤岛、算力低效、硬件投资与更新、网络与管理等问题,在智算中心的建设中,服务器的选择应根据实际需求进行权衡。训练服务器适用于模型开发和训练阶段,推理服务器适用于实时应用场景,而训推一体服务器则可以在两者之间实现灵活切换和资源共享。

与此同时,智算服务器与传统通用服务器最大的区别,在于算力芯片的不同。智算服务器为了保证操作系统运行,也配置了CPU。但是,为了更好地完成AI计算任务,配置了更多的GPU、NPU(神经网络处理单元)、TPU等计算芯片(4块或8块),以这些芯片输出的算力为主。

除了芯片不同之外,为了充分发挥性能以及保障稳定运行,AI服务器在架构、存储、散热、拓扑等方面也进行了强化设计。例如,智算服务器的DRAM容量通常是普通服务器的8倍,NAND容量是普通服务器的3倍,甚至它的PCB电路板层数也明显多于传统服务器。

大模型发展带来了对超大规模算力、高性能存储、超大规模算力调度及管理、绿色节能等技术能力的需求。算力中心当前阶段,规模属于万卡集群、体量大,服务器采购要多型号、多厂家,配套液冷需要专业液冷供应商提供,来解决其解耦交付痛点。

超聚变推出FusionPoD for AI整机柜液冷服务器,从双生态、多样性算力、绿色低碳方面全方位重构智算底座,为智算集群需求打造高密、坚实、开放平台。中兴通讯推出的新互联AI服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。新华三新发布的H3C UniServer G7系列依托面向AI的可进化架构、内生AI的操作系统和管理中枢,以及拥抱AGI的多元算力体系,为用户提供了灵活、高效、绿色的算力支持。浪潮元脑服务器NF5898G8,在AI算力方面具有强大的兼容性和卓越的性能,进一步加速算力融合创新。联想新一代Neptune海神液冷服务器,允许AI和HPC客户在不需要专门的数据中心空调的情况下运行100千瓦以上的服务器机架,98%的热量将转移到水循环中。信维全新推出的AI训推服务器H8650G5I提供不同的散热SKU,包括空气冷却和液体冷却解决方案。

对于服务器厂商而言,当其身量已不再局限于提供单一硬件产品时,而是提供综合性解决方案,这些解决方案可能包括服务器、存储、网络、安全等方面。未来,智算服务器将采用更高效的能源使用方式,实现绿色计算,并加强数据和模型的保护措施,以确保数据的安全性和隐私性。

责任编辑:胡媛

算力中心是什么意思


返回网站首页

本文评论
Windows“换机神器”Macrium Reflect免费版要没:将在2024年彻底停止支持
近日,知名Windows备份与克隆工具Macrium Reflect的开发商Macrium Software公司宣布,将停止软件免费版的维护支持。2022年诺贝尔奖颁奖时间根据该公司在Macrium Reflect产品支...
日期:11-30
iOS 17 Beta版泄天机:苹果祖传静音开关按键在iPhone 15 Pro上消失了
快科技8月23日消息,iOS 17 Beta 7版本正式推送。9to5Mac发现,iOS 17 Beta 7为启用/禁用静音模式添加了触觉反馈,用户在这两种模式之间切换时,手机振动更为明显。2022年组装电脑...
日期:08-23
阿里巴巴杭州全球总部5月10日投入使用_阿里巴巴杭州全球总部5月10日投入使用量
5 月 7 日消息,5 月 10 日,位于杭州未来科技城的阿里巴巴全球总部(西溪 C 区)将正式投入使用,同一天阿里北京朝阳科技园也将启用。老板抽油烟机83625 月 10 日也是阿里巴巴第 20...
日期:05-07
《双城之战》第二季中文主题曲《这样很好(Isha's Song)》上线:陈奕迅演唱
今日新闻:《英雄联盟:双城之战》动画第二季正式回归,备受期待的中文主题曲《这样很好(Ishas Song)》现已上线。由实力唱将陈奕迅深情献唱,谱写动人旋律。该主题曲已登录QQ音乐、网...
日期:12-23
NASA“露西号”将飞掠地球以进行重力辅助_美国露西号探测器
NASA任务工程师将持续跟踪“露西号(Lucy)”航天器,因为它准备在10月16日飞掠地球以进行重力辅助。这将使它能利用这个星球的引力来获得一些轨道能量并使自己走上通往木星特洛...
日期:10-18
时隔四年再次挑战:印度计划7月14日发射“月球3号”探测器「印度发射的月球探测器」
快科技7月9日消息,4年前,印度航天局(ISRO)曾计划发射Chandrayaan-2(月球2号)探测器进行月球探测。全新一代屏下摄像手机中兴Axon 30 5G发布影音先锋爱持物但最终,被印度寄予厚望的C...
日期:07-09
贾玲瘦身后第一次见观众泪流满面!为《热辣滚烫》减肥100斤大变样
快科技2月12日消息,据灯塔专业版数据,截至2月12日18时37分,2024年春节档(2月10日2月17日)档期总票房(含预售)突破35亿。《热辣滚烫》《飞驰人生2》《熊出没逆转时空》暂列档期票房...
日期:02-13
丰田bz 4x「丰田bZ4X降价也卖不好!丰田亲自承认:我们开发电动车失败了」
不同于燃油车,丰田电动车在中国市场几乎没有什么存在感,甚至丰田官方也承认,其电动化在中国市场的失败。4月16日消息,快科技了解到,近日,丰田汽车新任社长佐藤恒治在媒体交流会上...
日期:04-16
rtx 3090显存「12999元的RTX 4090显卡解禁:CPU已成性能瓶颈」
今晚NVIDIA的RTX 4090显卡正式解禁,售价12999元的新一代显卡旗舰展示出了强大的性能水平,之前官方表示在DLSS3、RTX等技术加成下,性能可是3-4倍于上代的RTX 3090显卡。当然,不考...
日期:10-15
纯旗舰定位!小米MIX Flip要来了:首款骁龙8 Gen3小折叠_小米折叠屏手机mix fold配置
快科技6月3日消息,今天荣耀的首款小折叠Magic V Flip正式官宣,将于6月13日正式发布。ipadpro2020 oled据博主数码闲聊站爆料,荣耀Magic V Flip定位偏向女性市场,应该会以轻薄时...
日期:06-03
腾讯持股美团_腾讯“分手”传闻,“吓丢”美团千亿市值?
题图|视觉中国   作者|黄青春   今天(8月16日)午后,“腾讯或将出清美团股票”的消息在网上不胫而走,美团港股急转直下,盘中跌幅一度扩大超 11 %,对应市值蒸发一度超千亿港元。...
日期:08-18
流畅度大提升!澎湃OS八月升级计划一图看懂:小米14/K70系列首批推送
快科技8月14日消息,小米官方今天发布了澎湃OS八月份升级公告,通过一张长图详细介绍了这批升级的详情以及适配计划。这样的介绍方式比对联”简介清晰明了很多,值得点赞。具体来...
日期:08-14
首批骁龙8 Gen3!Redmi K70系列三款机型全入网:下月发布_红米7骁龙
快科技10月24日消息,继前不久Redmi K70系列90W快充机型入网后,两款高配版也最新获得认证,均支持120W快充。oppo折叠手机推荐性价比高金山毒霸官方客服新机的代号分别为23113RKC...
日期:10-24
QQ阅读电子书设备将停止运营,后续将不支持新书购买_QQ电子书阅读器
小米note 8 pro跑分腾讯科技发来微信验证码怎么回事用于微信企业注册东风风光580保质怎么样  Kindle之后,又有一家电子书设备品牌即将停止运营。  阅文服务管家官方消息,Q...
日期:09-28
iphone16电池容量多少16电池容量曝光 双版本大升级 iPhone_16x电池容量
来源:中关村在线microsoft edge chromium2020印度能进口中国苹果吗据内部人士透露,苹果即将推出的iPhone 16系列机型在电池容量上将进行调整。虽然总体来说电池容量提升了,但并...
日期:02-08
国家烟草专卖局:未取得烟草专卖许可证不得生产经营电子烟_违反国家烟草专卖管理法律法规未经许可
9月29日 消息:今日,国家烟草专卖局发布《关于加强电子烟监管有关事项的通知》称,2022年10月1日起,从事电子烟生产经营的电子烟市场主体应当取得烟草专卖许可证,严格按照《中华人...
日期:10-06
西山居的进化之路:传承“技术立业”,迈向“玩家圣地”「西山居总部在哪」
5 月 22 日上午,金山珠海软件园启用揭幕仪式暨西山居 28 周年庆典正式举办。金山软件董事长雷军为金山珠海软件园一期、二期全面启用揭幕,并出席了西山居 28 周年庆典,见证了西...
日期:05-26
阿拉丁白皮书 | 2021上半年小程序DAU超4.1亿, 预计全年交易GMV近3万亿
  00 导语   2021年7月21日,阿拉丁研究院正式发布《2021年上半年小程序互联网发展白皮书》。据白皮书数据统计,2021年上半年全网小程序数量超过700万!其中微信小程序DAU...
日期:01-20
3名员工盗用公司游戏代码 半年赚了1.5亿:内容相似度近100%「盗用游戏账号什么罪」
国内游戏行业的抄袭、模仿已经不是新闻,然而还有一些人胆子大到让人无法相信,上海一游戏公司的3名员工就盗用公司代码搞自己的游戏,半年赚了1.5亿,结果被抓。据上海普陀分局的消...
日期:06-29
京东内部邮件曝光:百亿补贴已上线内测:或3月3日正式开场「京东百亿补贴商品是正品吗」
近日,关于京东要上线百亿补贴频道的消息在业内传开,据说是要对标拼多多百亿补贴,开启价格内卷”战,引起了不小的关注。绿色能源产业B站回应将赴港二次上市今天一份京东内部邮件...
日期:02-25