您的位置:首页 > 互联网

pptv老总「PPTV创始人姚欣AI再创业,“分布式推理”终于有人做了」

发布时间:2024-09-11 20:04:18  来源:互联网     背景:

声明:本文来自于微信公众号量子位 | 公众号 QbitAI,作者:克雷西,授权转载发布。

这个月,PPTV创始人姚欣再次站到了聚光灯下,组织了一场分布式云计算论坛,向外界揭开了他的新篇章。

姚欣的第二次创业,瞄准了云服务,要打造 AI 时代的基础设施。

但姿势独特:公司没有自建IDC和购买GPU,而是通过独特的方式成为了全国最多节点的云服务商

成立六年来,PPIO派欧云已获三轮共4亿元的融资,包括百川智能创始人王小川、迅雷创始人程浩、前微软Azure中国总裁申元庆在内的19位CEO都参与了天使投资。

姚欣,曾是互联网视频时代的开拓者,2004年,他在华中科技大学读研时辍学创业,发明了P2P-Streaming协议,创办了覆盖全球4.5亿用户的视频平台PPTV,比YouTube还早1年

PPTV在PC时代创立,移动互联网早期就迅速崛起,2012年位列中国视频网站用户规模第2名。然而,2014年,姚欣将PPTV出售,似乎淡出了公众视野。

姚欣重回到公共视野的当下,我们不禁想问,在市场接近饱和的环境下,为何姚欣坚持要选择云服务赛道?又因何受到投资者如此青睐?

一方面,时势造英雄,2020年Gartner开始推崇的分布式云概念,给了姚欣这个“分布式信徒”难得的发展机遇;

另一方面,英雄造时势,姚欣也前瞻性地选择跳过训练算力业务,全部聚焦发展分布式推理算力,下注AI应用普及对于推理算力的巨大需求。

当分布式计算遇见AI Infra

要理解姚欣的再创业,可以先从这样的具体案例中感知——

国内某Top3小说推广APP,开始为创作者提供AIGC生图功能,吸引了更多的作者和读者。

AI技术带来的流量增长自然是一件好事,但与此同时带来的运维压力也陡然上升。

而且随着这样的新功能被更多人所熟知,后台服务器性能也遇到了瓶颈,高峰时期生成速度明显变慢的情况开始逐步显现。

在过去,解决的方式简单粗暴——扩容,但一味地选择这种方式,实际并非长久之计,不仅代价高昂,而且在面对不确定性增长时显得力不从心。

而PPIO的分布式架构,就是针对这种场景和痛点而生。

这不仅是一种技术选择,更是一种为未来打下基础的架构方案。

它打破了传统集中式架构的瓶颈,不仅为企业大幅降低了运维压力,还将系统的处理效率提升到了一个全新的高度。

利用PPIO提供的AI推理平台,免去了自行部署后台服务的繁冗过程,通过API即可调用服务,不再需要自行运维,成本直接减少了40%

速度方面,得益于PPIO庞大的分布式算力网络,网络拥堵现象大幅降低。

据了解,采用PPIO服务后,该小说APP的平均生图时间从10秒缩短到了2秒,生产效率提升了50%

姚欣还介绍,如果海外AI应用使用其推理服务,能够获得比硅谷还要高的综合性价比。

这得益于PPIO遍布全球的分布式云服务网络,无论用户身处何地,总能找到近距离的算力节点,获得20毫秒级的低延迟体验。

pptv老总

姚欣选择分布式推理并非偶然,而是基于他多年对整个行业的深入理解。

根据TIRIAS research的研究,随着AI的快速发展,未来算力需求的构成将发生重大变化,95%的算力需求来自推理,训练算力仅占5%。推理将逐渐成为AI计算的核心

pptv 姚欣

姚欣看准了AI时代算力结构转型的机遇,将重心放在推理侧。

推理计算的核心在于实时处理用户请求,低延迟和高效率是它的生命线。

而分布式技术,恰恰是实现这一需求的不二之选——

通过将推理计算分布到全球多个节点,PPIO能够最大限度地减少到用户的时延;

同时根据不同区域的需求波动智能调度算力资源,确保全局计算效率始终保持最佳状态。

分布式推理不仅是一次技术创新,更是一种新的商业模式,让中小企业和开发者不再为算力门槛所困,让他们也能走进AI世界。

相比之下,传统的大型数据中心虽然具备强大的处理能力,但其成本高昂,不仅包括硬件设备的购置和系统维护,还包括高度集中带来的大量散热能耗的需求。

分布式云通过调度分布在全国各地的中小型数据中心或边缘计算节点,充分利用当地高性价比能源和算力资源,降低总体运营成本。

当然,姚欣还提出了“三年内降本1000倍”的期望,要想成功实现,除了庞大的分布式算力网络,还要有更多创新技术的支撑。

为此,姚欣给出了他的答案——Serverless弹性调度和推理加速优化

其中,Serverless架构被用来解决跨区域服务过程中节点数量庞大、用户请求复杂的问题。

该架构通过智能整合分布式算力,自动实现弹性伸缩与按需付费。

用户可将自有镜像或模型托管到该平台,不用再担心海量用户的并发响应问题,亦无需亲自管理和维护大量算力服务器。

pptv老总

派欧算力云Serverless产品自动弹性触发时延和单实例冷启动速度

除此之外,PPIO还通过算法、系统和硬件的协同创新,推出了针对大语言模型特点的推理加速引擎。

借助全链路FP8量化、KV Cache稀疏压缩算法,以及投机采样等技术,显著提升了推理的加速性能,打破了显存、算力和带宽的限制,释放了大模型推理的更大潜能。

pptv 姚欣

此次的分布式云计算论坛,标志着姚欣的第二次创业取得了阶段性的成功。

这背后除了有姚欣自己对行业的独到见解,还有分布式云自身与云服务发展形势的契合。

分布式云的天时地利

在国内的云服务领域,有很多我们耳熟能详的选手,华为、百度、腾讯、阿里等众多互联网大厂,都拥有自己的云服务产品。

但这些云服务无一例外都采用了集中式的方式,更加衬托出了姚欣做的分布式云系统的别具一格。

不过,姚欣强调,分布式与集中式并非对立的选择,而是相互补充的合作模式

技术上看,PPIO采用了集中式云服务也在用的基于K8S技术的云原生架构,能够与集中式云进行标准的互联互通;

商业模式上看,用户也不会过度关注自己的产品究竟运行在哪种云,他们更在意的,是最终的运行效果。

归根结底,究竟应该采用哪种运算方式,取决于具体的应用场景。

pptv老总

在竞争与合作共存的格局当中,分布式云的独特优势在于,它能够解决集中式云难以应付的需求

随着AI新应用的大量落地,产生了大量的实时数据计算和海量IO吞吐,AI带来的新算力需求以超越摩尔定律的方式不断膨胀。

正是这些大量实时计算需求的涌现,让传统的集中式算力中心显得捉襟见肘,但这真的是因为算力总量不够用吗?

答案是否定的。

据统计,我国有47%,也就是将近一半的算力都处于闲置状态,未被充分利用。

长城氢能战略

pptv老总

造成这一现象的核心原因,是算力需求与供给的不匹配。数据中心和超算中心的建设过于超前,但数据产生地与算力节点往往相距甚远,造成了算力不足的表象。

所以,算力唯有“去中心化”,下沉分布到网络侧边缘,才能解决时延和海量数据IO吞吐问题。

PPIO做的就是这样的工作,其本身不生产算力,而是作为空闲算力的“搬运工”和“指挥员”,解决算力时空分布不均、利用效率低下的窘境。

当然,姚欣的愿景不仅限于当前的云服务,他提出了算力发展的三条曲线,目前已经基本建成的,是其中的前两条——边缘云(红色)和算力云(绿色)。

去年,PPIO更是根据这两条“曲线”,将公司的业务线拆分成了两个事业部。

pptv老总

而“第三条曲线”,则是实现各个组织机构间,算力资源的实时调度和自由交易

姚欣认为,从技术角度看,业界已经有能力实现这种模式,但在产业共识和商业模式上,还需要参与者的共同努力。

但就像从云计算诞生之初,人们都不相信公有云,到后来公共云服务逐渐成为主流一样,这种“算力共享”也将经历一个形成共识的过程。

佳明garminactive 曜石黑拆解

而之所以选择这条与众不同的创业之路,源自姚欣丰富的创业经历与技术信仰。

创业者姚欣:立志把分布式技术写进教科书

公众眼中的姚欣有很多标签:大学创业、网络电视、互联网、投资人等。

然而,常常被忽略的是,他在技术方面同样拥有着深厚的积淀

事实上,姚欣自从高中时起就是一名学霸。

他曾连续两年获得全国奥林匹克计算机竞赛一等奖,1999年被保送进入华中理工大学(现在的华中科大)。

也正是在大学生涯之中,姚欣接触到了分布式计算这个概念——他的老师金海教授(华中科技大学教授,中国计算机学会副理事长),正是将这一概念带入中国的第一人。

pptv老总

金海教授早在2002年就开始负责中国教育网的网格计算(分布式计算的一种)建设,2007年也是第一批从事虚拟化和云计算研究的科研专家。

一直到现在参与设计国家提出的“东数西算”和算力网络,是中国分布式计算领域的领军人物。

当时,金海教授就跟姚欣讲了算力大众化的愿景:

当有一天网格(当时的叫法)足够分布的时候,我们每个人用算力就像用电用自来水一样,随时随地接上插头、打开水龙头就可以使用到。

金老师所描绘的技术普惠理念深深影响了姚欣,并植入了他的创业初心。

除了金海教授让姚欣接触到了分布式计算,姚欣的创业的另一大源动力是他对身边事物的观察。

姚欣读大学时正值2002年世界杯,在校园中观看足球比赛就成了一个火热的需求。

其间,姚欣发现了一个不寻常的现象——

像HTTP、FTP这样的传输协议,用的人越多速度也就越慢,但如果用BitTorrent这种P2P的传输方式,用的人越多,速度反而越快。

pptv 姚欣

网格计算需要连接很大的计算节点,但可以整合每个人电脑的上行带宽,构建一个分布式的存储和传输的网络,提供基于P2P技术的网络电视服务。

这一想法促使姚欣创建了PPLive(PPTV的前身),起初PPLive只是一个简陋到没有界面的学生作品,但是很快就获得了过亿的下载量。

pptv 姚欣

PPTV的成功,毫无疑问依赖于技术优势。相比(当时的)优酷、土豆等竞争对手,PPTV的视频处理成本仅为其1%。

后来,卖掉了取得成功的PPTV后,姚欣开始重新思考自己的未来目标。

他不再满足于“一人的成功”,而是想将其转变为“众人的成功”,希望通过聚集更多人的力量来实现改变生活的技术创新。

pptv 姚欣

从视频行业中暂时淡出的姚欣,也始终未曾远离分布式计算的技术愿景——

在PPTV的成功背后,正是他对资源整合和计算效率提升的深刻理解,而这些理念也是他对分布式计算长久关注的理论基础。

这也直接推动了他后续的技术创业选择,并在分布式推理领域的发展中得到了实践。

在姚欣看来,创业者最重要的,不是随大流,不是去模仿,而是要有足够的差异化和独特竞争力

所以即使在今天看来,PPIO选择的分布式赛道,依然如同PPTV一样,显得十分“另类”而新颖;

自己不建大型数据中心,而是整合利用大量的闲置数据中心,这种商业模式也是独树一帜。

从P2P-Streaming到分布式推理,姚欣的创业路径看似从互联网内容平台转向了技术基础设施,但实际上,这两者本质上是一脉相承的

姚欣始终在探索如何通过网络的集体力量提升效率、降低成本,并以分布式技术为基础,解决计算中的瓶颈问题。

如今,他将同样的理念应用于AI推理领域,专注于解决算力供需不平衡的问题。

走到今天,姚欣的志向已经不只是把企业做大做强,而是希望能够开创出具有时代意义、能够被写进计算机教科书的技术

正是出于这一理想,PPIO聘请了金海教授担任公司技术委员会主席。

金海教授将为公司技术团队提供深入全面的指导,将分布式云技术边界进一步拓展,推动更多应用的落地,让更多创业者轻装上阵

One More Thing

在刚刚结束的2024分布式云计算论坛上,PPIO除了推出了AI算力云产品外,还联合PingCAP、Zilliz、AscentStream和CSDN,共同启动了“Pioneers AI初创加速计划”

面向AI初创企业和开发者,提供包括分布式算力、分布式关系型数据库、分布式向量数据库、分布式消息队列、开发者社区等全面的资源和技术服务,助力初创团队在分布式云上实现快速成长,加速其创新成果的落地。

pptv 姚欣

正如姚欣在分布式云计算论坛上说的那样,他的终极目标不仅是推动分布式云成为广泛应用的技术标准,更是通过持续创新,帮助更多企业和开发者在AI时代中获得成功

我们站在AI时代的门槛前,正在见证一批又一批满怀梦想的开拓者纷纷涌现。

正如当年那个24岁的姚欣一样,他们需要的,不仅仅是资金和技术,更需要来自同路人、来自先行者的经验和鼓励,就像当年的金海教授一样。

现在,轮到了我们承担起这样的使命,用分布式的力量,做新一代应用的基础设施,支撑起新时代的开拓者砥砺前行!

“Pioneers AI初创加速计划”入口:

https://www.ppio.cn/campaign/ai-pioneers


返回网站首页

本文评论
美团原联合创始人王慧文以顾问身份回归-王兴内部信_美团联合创始人王慧文:清华大学《互联网产品管理课》
IT之家 4 月 2 日消息,美团 CEO 王兴今日发布内部邮件,称美团原联合创始人王慧文逐步恢复健康,将用部分时间承担美团顾问一职。王兴在邮件中表示,“老王将以他的经验和智慧,在公...
日期:04-02
百度回应主力模型免费:最大限度降低企业创新试错成本
5月29日 消息:近日,在2024智能经济论坛上,百度集团执行副总裁、百度智能云事业群总裁沈抖深入解析了文心系列主力大模型免费策略的背后逻辑。沈抖指出,文心大模型之所以能实行...
日期:05-29
马斯克第12个孩子出生:孩子母亲为Neuralink女下属_马斯克 六个孩子
6月22日 消息:科技巨头埃隆·马斯克再次扩大了他的家庭,成为了第12个孩子的父亲。据了解,今年早些时候,马斯克与Neuralink公司的员工希冯·齐里斯共同迎来了他们的孩子,这是马斯...
日期:06-22
内蒙古通信管理局启动自治区算力网络时延圈建设工作
通信世界网消息(CWW)据内蒙古通信管理局消息,为深入贯彻落实国务院《关于推动内蒙古高质量发展奋力书写中国式现代化新篇章的意见》,加快构建多级时延网络,巩固提升自治区算力产...
日期:01-12
多面视频面试神器:足不出户轻松“面”(多面视频面试app)
  在招聘环节中,很多企业集团倾向于线下面试,线下面试不仅便于答题、交卷,也能使HR和面试官更清晰地观察到应聘者的言行举止来进行多方面的判断和考核。线下面试虽有这么多...
日期:07-10
比亚迪海洋网「正式分家了!比亚迪王朝/海洋APP上线 独立运营」
快科技8月30日消息,比亚迪宣布明天起,比亚迪汽车APP正式升级,将分化为比亚迪王朝APP和比亚迪海洋APP,两套系统独立运营。amd r7 5800H跑分届时,比亚迪汽车APP将会通过弹窗引导用...
日期:08-30
马斯克豪掷40亿训Grok-3,红杉高盛大泼冷水,AI收支鸿沟或已达5000亿美元
声明:本文来自微信公众号“新智元”(ID:AI_era),作者:新智元,编辑:好困 Aeneas,授权转载发布。马斯克为Grok3要豪掷近40亿美元狂买10万张H100,GPT-6的训练则可能要耗资百亿。然而红...
日期:07-08
抖音带货“一姐”出现了「抖音带货大佬有哪些」
声明:本文来自于微信公众号派代(ID:paidaiwang),作者:CiCi,授权转载发布。在派代统计的9月带货主播TOP10榜单中,丫头baby位列第十,东方甄选稳居第一。然而到了10月6日,丫头baby超越了...
日期:10-26
36年前电脑用上AI:IBM 5155运行ChatGPT是什么样?
如果要绘制进一度时间科技新闻关键词词云的话,占据空间最大、最显眼的绝对是人工智能”四个字。2022年9月苹果发布的新款ipad那么,你是否能够想象,在一台距今已有36年历史,运行M...
日期:03-27
冰雪经济又叫什么境界「“冰雪经济”显红利,SHEIN卖家2024开年销售涨8倍」
  滑雪是世界范围内最受欢迎的冬季运动之一,伴随着今年北半球进入了“速冻”模式,随之而来的是滑雪等冬季运动用品销售进入了市场活跃的黄金阶段。根据海外权威机构Statista...
日期:01-25
玲娜贝儿正版公仔「因仿冒“玲娜贝儿”玩偶2.5万余件 两被告人被罚20余万元」
4月28日 消息:近日,上海市浦东新区人民法院审理了一起侵犯“玲娜贝儿”著作权刑事案件,并当庭作出一审判决。2021年3月12日,迪士尼企业公司创作完成“玲娜贝儿”(英文名:LinaBel...
日期:04-28
王者荣耀凤凰图片_凤凰之眼照耀王者峡谷,这才是最适合王者荣耀的手机!
  随着《王者荣耀》、《和平精英》这类型游戏的火爆,很多用户在换手机时都很看重手机的游戏性能及上手操作体验,强悍的性能配置是必不可少的,但想要更为出色的游戏体验,手机...
日期:08-07
阿里开源新模型:超GPT-4o,数学能力全球第一!_阿里开源软件
声明:本文来自于微信公众号 AIGC开放社区,作者:AIGC开放社区,授权转载发布。阿里巴巴开源了最新数学模型Qwen2-Math,一共有基础和指令微调两种版本,包括1.5B、7B和72B三种参数。...
日期:08-09
大模型降价狂潮引发价格战:通义千问、豆包最新API接口费用查询对比
人工智能正在以前所未有的速度发展,大模型已经成为当下科技领域的热门话题。近期,一场大模型API费用的降价狂潮在国内外掀起了轩然大波,多家科技巨头纷纷加入战团,推出史无前例...
日期:05-23
90后夫妻回应卖500万房到草原定居:每天快乐很重要
现在年轻人,对于城市生活,也有了自己的选择。据微博视频,日前一对浙江90后夫妻十三阿全”卖掉杭州房子去内蒙古定居的事情引发网络热议。伦敦苹果直营店视频中,女主回应表示我们...
日期:11-14
长城汽车发布会媒体证MEDIA写成MEIDA 官方回应:反思中_长城汽车新闻发布会
快科技2月28日消息,近日,有汽车博主参加坦克700 Hi4-T发布会时发现,发布会的媒体证出现明显错误,将媒体英文media错写成了meida。博主调侃,让我把英文和拼音都整不会了”。吉利控...
日期:02-29
日耗电量「ChatGPT日耗电超50万度」
通信世界网消息(CWW)近期有媒体披露,OpenAI旗下的热门聊天机器人ChatGPT的每日电力消耗惊人,可能超过50万千瓦时。这一数字相比美国普通家庭日均29千瓦时的用电量,显得尤为突出,高...
日期:03-12
特斯拉 三季度「外媒称特斯拉开始冲刺 计划四季度生产49.5万辆Model 3和Y」
10月1日消息,据国外媒体报道,每一年的四季度,通常是特斯拉电动汽车产量和交付量最高的一个季度,他们在四季度也会更繁忙,马斯克此前也曾致信员工,激励他们加快生产和交付。A3数码...
日期:10-06
李想列举“最值得内部学习”的企业家:任正非、王传福、马斯克在列
很多人都有榜样和学习的对象,即便是已经很成功的人。2月8日,理想汽车CEO李想在微博公开表示,最值得我们自己内部学习的企业家:华为的任正非、比亚迪的王传福;苹果的乔布斯、特斯...
日期:02-08
腾讯对美团持股「腾讯向股东派发9.58亿股美团股票,腾讯总裁刘炽平卸任美团董事」
2022年11月16日消息,腾讯控股公告显示,将按合资格股东持有每10股股份获发1股美团B类普通股的基准,向于记录日期名列本公司股东名册上股东按彼等当时各自于本公司之持股比例,以实...
日期:11-24