您的位置:首页 > 互联网

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较)_算力中心怎么挣钱

发布时间:2024-12-24 17:16:37  来源:互联网     背景:

寻找"算力王":智算中心需要怎样的AI服务器(附典型比较) 通信产业网|2024-11-12 09:30:15作者:胡媛来源:通信产业网

【通信产业网讯】(记者 胡媛)近两年,AI大模型给产业带来了巨大的影响,以GPU为核心的智算逐步成为算力的主要发展方向。据工信部规划,中国智能算力的占比将在2025年达到35%,年复合增长率在30%以上,这意味着智算中心将引领数据中心建设的潮流。

服务器是提供数据存储、运算等服务的高性能计算机,包含处理器、内存、硬盘和其他功能及基础硬件。2024年以来,中国智算中心建设如火如荼,也在不断推动着服务器厂商持续推出加速计算服务器新品。

戴森的台灯值得买吗

运营商智算“加速跑”

AI算力基础需求高增,国内供给显著改善。今年以来,运营商开展了大规模的智算中心建设,并开展了几次重要的算力服务器集采。

从资本开支来看,运营商加大算力相关资本开支。公开信息显示,2024年,中国移动算力领域预计投入475亿元,同比增长21.5%,占资本开支比重提升5.8个百分点至27.5%。中国电信产业数字化计划资本开支370亿元,同比增长4.1%,在云/算力计划投资180亿元。中国联通在算网数智投资方面将坚持适度超前、加快布局,但是未披露具体数额。可以看出,中国移动暂时拔得头筹,中国电信和中国联通紧随其后。

此外,财报显示,到2024年底,中国电信智算算力规模将大幅领先,中国移动次之。中国电信计划2024年智算算力提升10EFLOPS,超过21EFLOPS。中国移动2024年智算算力累计超过17EFLOPS。

双面屏手机是什么样的

从运营商积极布局智算中心来看,据不完全统计,目前,国内建成和在建的智算中心项目超500个,运营商为满足市场需求,正加快建设智算中心项目超80个,争夺政企市场。

中国移动优化全国性智算中心和边缘智算节点布局,全网智算规模达到17EFLOPS(FP16),年内将投产3个近两万卡超大规模单体智算中心和12个区域智算中心。中国电信适度超前建设智算基础设施,持续加大智算能力建设,规划并建设全国“2+3+7+X”公共智算云池,在京津冀、长三角地区建设两大万卡智算集群,西部地区打造大规模绿色智算池。中国联通布局热点集约、跨区辐射、边缘覆盖的多级算力体系,构建了“1+ N+X”全国分梯次智算资源,IDC规模超40万架,云池覆盖230多个城市。

从运营商招标项目来看,2024年4月,中国移动发布2024年至2025年新型智算中心采购招标公告,此次采购包含AI服务器7994台,成为有史以来国内最大规模的AI服务器集采。加上此前中国移动2023年至2024年新型智算中心(试验网)集采项目,12个标包对应AI训练服务器采购量总计达到2454台,中国移动这两次AI服务器集采规模合计超万台。

iqoo neo6是旗舰还是次旗舰

除了中国移动之外,其他两大运营商此前也开启了AI服务器大规模采购。中国联通在今年3月启动2024年人工智能服务器集采,其中,人工智能服务器采购总规模为2503台。中国电信在去年10月也采购了4175台AI服务器。以算力基础设施来说,在大模型产品迭代发展中,算力需求持续增长,带动AI服务器的需求居高不下。

AI服务器市场竞争激烈

在智算中心的建设中,服务器的选择至关重要,它直接关系到算力的强弱、任务的执行效率以及资源的利用率。一般来讲,智算中心的服务器主要包括训练服务器、推理服务器或训推一体服务器等三大类。

训练服务器主要利用大量数据对AI模型进行训练,通过调整模型参数使模型更好地拟合数据,学习数据中的特征和规律。这通常需要高性能的硬件支持,如高性能GPU或TPU(张量处理单元),以及大容量内存和高速存储设备。此类服务器的特点是适用于模型开发和训练阶段,需要强大的计算能力和长时间的稳定运行。  

推理服务器主要功能是对输入数据进行快速推理计算,生成预测结果。这通常用于实时应用场景,如自动驾驶、实时语音识别等。这类服务器特点是要求低延迟、高可靠性,通常采用低功耗的GPU或专用的推理芯片,如NVIDIA的TensorRT系列芯片,在保证推理速度的同时降低能耗和成本。

训推一体服务器是既能进行模型训练又能进行推理计算的服务器。它的特点是资源利用率高,可以根据实际需求灵活分配计算和存储资源。但设计和维护成本也相对较高,需要解决CPU和GPU之间的算力融合问题,以及不同任务之间的资源调度问题。

针对智算中心存在的算力融合、算力孤岛、算力低效、硬件投资与更新、网络与管理等问题,在智算中心的建设中,服务器的选择应根据实际需求进行权衡。训练服务器适用于模型开发和训练阶段,推理服务器适用于实时应用场景,而训推一体服务器则可以在两者之间实现灵活切换和资源共享。

与此同时,智算服务器与传统通用服务器最大的区别,在于算力芯片的不同。智算服务器为了保证操作系统运行,也配置了CPU。但是,为了更好地完成AI计算任务,配置了更多的GPU、NPU(神经网络处理单元)、TPU等计算芯片(4块或8块),以这些芯片输出的算力为主。

除了芯片不同之外,为了充分发挥性能以及保障稳定运行,AI服务器在架构、存储、散热、拓扑等方面也进行了强化设计。例如,智算服务器的DRAM容量通常是普通服务器的8倍,NAND容量是普通服务器的3倍,甚至它的PCB电路板层数也明显多于传统服务器。

大模型发展带来了对超大规模算力、高性能存储、超大规模算力调度及管理、绿色节能等技术能力的需求。算力中心当前阶段,规模属于万卡集群、体量大,服务器采购要多型号、多厂家,配套液冷需要专业液冷供应商提供,来解决其解耦交付痛点。

超聚变推出FusionPoD for AI整机柜液冷服务器,从双生态、多样性算力、绿色低碳方面全方位重构智算底座,为智算集群需求打造高密、坚实、开放平台。中兴通讯推出的新互联AI服务器突破单节点算力瓶颈,旨在应对AI大模型训练中的通信带宽和时延挑战,并在算力提升和扩展性方面展现了领先的技术创新。新华三新发布的H3C UniServer G7系列依托面向AI的可进化架构、内生AI的操作系统和管理中枢,以及拥抱AGI的多元算力体系,为用户提供了灵活、高效、绿色的算力支持。浪潮元脑服务器NF5898G8,在AI算力方面具有强大的兼容性和卓越的性能,进一步加速算力融合创新。联想新一代Neptune海神液冷服务器,允许AI和HPC客户在不需要专门的数据中心空调的情况下运行100千瓦以上的服务器机架,98%的热量将转移到水循环中。信维全新推出的AI训推服务器H8650G5I提供不同的散热SKU,包括空气冷却和液体冷却解决方案。

对于服务器厂商而言,当其身量已不再局限于提供单一硬件产品时,而是提供综合性解决方案,这些解决方案可能包括服务器、存储、网络、安全等方面。未来,智算服务器将采用更高效的能源使用方式,实现绿色计算,并加强数据和模型的保护措施,以确保数据的安全性和隐私性。

责任编辑:胡媛

算力智库官网


返回网站首页

本文评论
HTC对赢得苹果专利侵权案充满信心_苹果为什么只起诉htc
  10月18日上午消息,全球第五大智能手机制造商HTC周二表示,尽管美国国际贸易委员会作出了不利于公司的初步裁决,但公司仍有信心在针对苹果的专利诉讼中胜诉。   HTC首席法...
日期:07-24
模型根据肉色人体背景自动补全 华为高级工程师回应“Pura-70 Ultra 手机 AI 消除衣服”争议
IT之家 4 月 26 日消息,华为 Pura 70 Ultra 手机中的 AI 消除功能近日引发热议,据IT之家此前报道,这款手机中的自带图像编辑功能由盘古大模型提供 AI 消除技术,主打“可自动消除...
日期:04-26
华为Mate Xs 2将支持北斗卫星消息!余承东称技术比苹果更强
在今天下午的华为开发者大会上,余承东提到了华为Mate50系列首发的北斗卫星消息功能。怡亚通供应链总经理手机恢复出厂设置卖掉pico多久发布新产品他表示,这个北斗卫星消息功能...
日期:11-06
中国电信副总经理李峻:推进算力、数据、AI生态构建和开源开放
通信世界网消息(CWW)8月22日,在第八届未来网络发展大会主论坛上,中国电信副总经理李峻以《把握人工智能发展方向 打造新一代数字信息基础设施》为题作主旨演讲,分享了中国电信在...
日期:08-24
京东物流保价赔付规则「京东物流:“全额保”24小时理赔打款及时率达到99%」
10月28日 消息:近日,京东物流官方表示,“全额保”上线一月以来,24小时理赔打款及时率达到99%,最快一单打款时长仅为13分钟。彩妆带货话术9月29日,京东快递全新保价服务“全额保”...
日期:11-04
下暴雨外卖超时可以申诉吗「北京暴雨 外卖小哥:订单多三成 但没人催」
据北京气象局统计,从29日09时到31日18时,京津冀地区降雨最强的地方是邢台市临城赵庄梁家庄,达到了987.7毫米,最高的小时雨量出现在北京市丰台千灵山,31日10-11时下了111.8毫米的...
日期:08-01
一图看懂网易Q2财报:营收232亿元,Non-GAAP净利润54亿元_网易财报2020q2详细
值得入手的数码产品英特尔加快AI芯片交付抢市场,与英伟达竞争升级oppo r17摄像   讯 北京时间8月18日下午消息,网易(Nasdaq: NTES;HKEX: 9999)今日发布了截至6月30日的2022年...
日期:08-20
卫星,未来太空数据的_卫星科技下载
想让太空数据服务普通人,需要给卫星装上「新大脑」。作者 | Founder Park俄乌战争中,SpaceX 的星链突然成为了大众的关注点。在战争开始后,马斯克迅速为乌克兰开启了星链服务,很...
日期:09-14
三大运营商齐亮相2024年网络安全博览会_2020年4月8日三大运营商联合发布
三大运营商齐亮相2024年网络安全博览会 通信产业网|2024-09-09 11:29:12作者:廖志颖来源:通信产业网【通信产业网讯】9月7日,2024年国家网络安全博览会在广州南沙国际会展中心...
日期:09-12
想家吗!贾跃亭在美国吃上老家临汾牛肉丸子面 感叹每一口藏着家的味道
快科技9月27日消息,今日,法拉第未来(FF)创始人贾跃亭发布了吃面视频,并配文称家乡的味道,永远都是治愈我们疲惫人生的良药”。据贾跃亭介绍,他的朋友从国内给他带了老家临汾的牛肉...
日期:09-27
台积电回应巴菲特买入公司41亿美元股票:欢迎投资人长期持有_台积电大股东是美国
11月16日消息:日前据巴菲特旗下的伯克希尔哈撒韦披露的13F文件显示,三季度该公司建仓台积电共 6006 万股,持仓市值达 41 亿美元。对此,台积电表示,乐见并欢迎所有有意投资并长期...
日期:11-17
比亚迪宣布30周年抽30辆仰望送车主 回馈千万车主_比亚迪20周年
比亚迪宣布30周年抽30辆仰望送车主 回馈千万车主  【智车派新闻】10月16日,比亚迪汽车官方宣布,11月18日将迎来比亚迪成立三十周年,为感恩回馈所有客户及比亚迪近百万在职员...
日期:10-16
中央网信办点名MCN机构,榜单、打赏、连麦PK将接受规范监管
2022年以来清理违规短视频235万余条。   新京报讯(记者姜慧梓)记者从8月18日举行的中宣部“中国这十年”系列主题新闻发布会上获悉,中央网信办将全面规范榜单、打赏、连麦PK...
日期:08-19
斯巴鲁brz全新「平民小跑车!斯巴鲁BRZ Touge官图发布:全身改装件武装到牙齿」
快科技10月14日消息,作为平民小跑车,斯巴鲁BRZ向来有不少拥趸,在国内的键盘值”也非常高。近日,斯巴鲁在意大利推出了BRZ Touge特别版车型,这款车采用了STI套件以及一些定制的改...
日期:10-15
TrendForce:预计 OLED 手机渗透率 2023 年将达 50.8%「oled市场份额」
11月30日消息:据TrendForce集邦咨询研究显示,随着OLED面板在手机应用上逐渐增加,预估2022年采用OLED面板的手机渗透率约47.7%,至2023年将达50.8%,2026年则预计超越六成。TrendFo...
日期:12-02
Chrome 83 对表单控件和焦点元素的更新被吐槽
  最新发布的 Chrome 83 对表单控件进行了视觉效果的更新,其中对焦点元素的处理引起了众人的关注,当文本输入框处于焦点以及选定下拉菜单中的选项时,浏览器会在它们周围显示...
日期:07-14
iphone 印度富士康「印度制造iPhone合格率仅50%?富士康董事长这样回答」
近日,针对网络传闻称印度制造的iPhone良率偏低,鸿海集团董事长刘扬伟在接受采访时表示,这些说法都是不真实的。他指出,“印度制造与中国大陆制造并没有什么差别,如果只有50%的良...
日期:08-24
让AI走进千家万户 讯飞消费者产品618优惠剧透
  5月下旬,科大讯飞举办的“因为AI 所以爱”消费者业务半年度媒体沙龙上,讯飞数款全新C端硬件产品可谓看点十足。针对职场需求打造的效率神器智能录音笔、带来“真实手写体...
日期:10-17
小米十一ULTRA什么时候发布的「小米12s Ultra降到4999元 13 Ultra延期发布了」
小米12S Ultra日前已经全面升级到了MIUI 14,而今天一早消息称小米13 Ultra不会在2月发布了,将延期到3-4月,目前抄底小米12SUltra非常合适,现在4999元买安卓机皇非常值得入手,这也...
日期:01-12
人大代表:反对让学生逢雨逢雪停课 应多吃苦锻炼意志_你如何看待人大代表呼吁禁止给在校生办理信用卡
据国内媒体报道,有代表提出,频繁因雨、雪等天气而停课并不利于青少年的成长,并对此持反对态度。这位代表就是于金明。于金明强调,学生的意志和身体素质是需要通过锻炼来提高的。...
日期:03-07