您的位置:首页 > 互联网

不懂ComfyUI也能像大神一样搭工作流,这个小众视频创作神器怎么还没火

发布时间:2024-11-07 18:21:23  来源:互联网     背景:

声明:本文来自于微信公众号 AI新榜,作者:石濑,授权转载发布。

AI视频产品越来越卷了。

一拖一拽、输入提示词,点击生成,便在空白画布上搭建起了一个前段时间在网上很火的Flux+图生视频的工作流。

上图展示的工作流,用到了以写实逼真闻名的开源文生图Flux模型,和AI视频生成头部公司Runway的最新模型Gen-3。

在过去,这个工作流需要创作者手动在不同平台之间传素材,耗费大量时间。尤其随着素材数量增加以及创作团队规模的扩大,素材管理难度也会随之提高。

如今只需要打开Kaiber,点击进入新功能“Superstudio”创建画布,就可以轻松搭建自己喜欢的工作流。除了Flux和Runway,这个工具还集成了Luma、可灵AI、海螺AI等炙手可热的AI视频模型。

对于长期关注AIGC创作的玩家来说,Kaiber应该不算是一个陌生的工具了。

关于钢铁侠开放类的游戏

Kaiber是海外最早推出视频到视频(V2V)的公司之一。众多AI视频公司还在卷模型的时候,Kaiber就已经通过V2V视频转绘在音乐MV制作领域小范围出圈了,仅用7个月就吸引了250万用户。

美国知名摇滚乐队林肯公园为纪念《Meteora》专辑20周年,2023年相继发布《Lost》和《Massive》等经典老歌的动画MV,背后制作就用到了Kaiber。

小米左挖孔屏手机

《Lost》的动画MV如今在Youtube上播放量已超9000万次

无独有偶,另一款定位为“AI艺术创作平台”的AI工具——Krea AI甚至早于Kaiber将近期市面上主流能打、且开放了API的视频模型,集成到了自家的平台上。

彼时还引得硅谷风投机构a16z合伙人Justine Moore在X上发文盛赞“如果你厌倦了在不同选项卡之间不断切换,那么它(Krea AI)将改变游戏规则”,颇有些前阵子360AI搜索官宣集成15家国产大模型的气势。

在产品层面做整合、卷工作流,成了近期AI视频生成领域的新趋势。

就连之前以模块化理念和工作流界面著称的开源项目ComfyUI,也在最近宣布正在封闭内测一个更简单易用的桌面客户端:ComfyUI V1。

ComfyUI之前的安装和部署过程相对复杂,涉及各种节点、插件以及硬件要求,让不少新手望而却步。

淘票票影业

但由于功能全面、开源生态的支持,你会看到AI圈有一定影响力的创作者和博主都在使用ComfyUI进行风格化图像生成、视频转绘和人物姿态控制等复杂工作流任务。

而此次ComfyUI V1的推出正是为了降低新手使用ComfyUI的门槛。

使用门槛越来越低的AI视频产品,如何帮助创作者提效?眼看ComfyUI V1正式上线还得等一阵子,我们对Kaiber等已上线相关工作流功能的产品进行了一波实测和整理。

实测Kaiber新功能:

如何轻松搭建一个热门视频工作流?

不同于市面上大多数的AI视频产品,Kaiber采用画布式直观呈现来支持用户搭建工作流。

进入Kaiber新功能“Superstudio”的主页面(相关链接已整理至文末),官方会给出两个工作流案例。一个是结合了参考图和提示词的图像风格合成、一个是引入了Luma视频生成模型的文生视频工作流。

乍一看,与ComfyUI界面逻辑颇有几分相像,但在使用上对新手来说更为友好。

你可以在这两个工作流的基础上,更换图片或提示词,进行尝试,也可以在界面左侧点击新增一张空白画布,搭建自己的工作流。

创建完空白画布,一开始有些手足无措是正常的。简单熟悉下3个核心操作就可以很快上手了。

首先,调用模型或工作流。

点开上方菜单栏的“Flow Menu”,便可以找到该产品集成的所有模型和工作流。既有市面上很火的主流视频模型,也有用于图片或视频风格增强、转绘等玩法的工作流。

选中心仪的模型或工作流,将其拖拽进画布即可。

其次,右侧的素材存放区,你上传或生成的素材都可以在这里找到。

如果素材量太多,你还可以将它们整合到收藏夹(Collections)中,按项目或素材类型进行收纳整理。

相较之前素材存储相对独立的工具来说,这种设计非常直观。你可以通过拖拽的方式,轻松筛选需要重复利用的素材,而无需再打开本地文件夹、或在工具的素材库里一通好找。

最后,具体生成操作上,就和使用其他AI视频工具一样,通过输入文字提示词、或上传图片和视频等内容,调教AI干活即可。

与Kaiber相比,Krea AI虽然也集成了市面上主流的视频生成模型,但在产品界面设计上没有Kaiber的画布式工作流呈现直观。

在Krea AI中,用户生成图像后,需要点击图像上的视频生成按钮,跳转到视频生成页面,然后再选择视频模型进行视频生成。

根据工具或调用模型的不同,相应操作和使用的积分会有所差异。当然,AI视频工具的迭代速度相当之快,也许过几个月甚至几个星期,就会迎来一次模型更新或产品升级。

在这里,我们以Kaiber为例。现阶段在这个工具中调用Luma的视频模型是支持首尾帧功能的,而可灵、Runway等模型调用则不支持该功能。

其中,最贵的模型当属可灵Pro,每次调用需要消耗65积分。Kaiber的免费版订阅每月只有200积分,而15美元的月付费订阅则提供1000积分。

相当于,15美元只够调用15次可灵Pro。

对比海外版可灵Pro每月12.88美元、3000积分(约等于模型生成300个标准视频)的官方价格,可以发现Kaiber的定价多少有点“中间商赚差价”的意思了。

不过,对创作者来说,Kaiber这类在产品层面整合了多种热门模型的工具,带来的一大明显好处是:充值可以只充一个平台了。

此外,一些复杂的工作流也可以比以往更轻松地搭建和复用,大大提高创作效率。

特别是AI视频模型,各家的专长各不相同。例如,可灵在写实风格和对物理世界的理解方面表现出色,而Minimax的海螺则在语义理解和情感表达上具有优势。

之前要满足这两种需求,不仅需要订阅不同的平台,还涉及大量素材管理工作。

可以说,从产品层面对各大AI视频模型进行整合,一定程度上可以帮助难以上手使用ComfyUI的用户轻松使用多种热门模型组合搭建工作流,也能为Kaiber等一站式工具带来短期内的竞争优势。

疯狂卷产品,

AI视频工具可以留住用户吗?

其实不止海外,国内的AI视频工具也开始卷产品了。

据“AI新榜”观察,无论是字节旗下的即梦AI,还是美图出品的AI视频短片创作工具MOKI,都主打“一站式创作”,将故事创作、分镜生成、对口型等功能逐步集成到了自家平台上,覆盖短片和短视频制作的关键流程。

即梦AI使用界面

MOKI使用界面

阿里旗下正在内测的视频创作平台“寻光”,官方提及的核心功能也包括故事板生成、角色库管理、视觉素材创作和视频内容编辑等。

寻光核心功能,官方展示

力图解决创作者在视频生产中的痛点,是这类工具产品的迭代方向。只不过国内目前走生产力路线的AI视频工具,大多还没有集成多个视频模型供用户选择。

除了卷生产力的产品之外,还有卷玩法的产品。

在OpenAI内部一系列人事动荡,首席技术官Mira Murati、Sora项目负责人Tim Brooks相继离职之后,Sora年初画下的饼,如今像极了一个泡沫破裂后无人填坑的烂尾项目。

Sora热潮退去,留在牌桌上的玩家在现阶段比以往任何时候都需要吸引新用户,并且想办法留住老用户。

据SimilarWeb统计,Luma AI网站在9月的总访问量仅为1181万次,环比下跌38.49%;曾红极一时的黑马选手Pika在9月总访问量仅110.8万次,环比下跌9.78%。

面对用户增长乏力、留存率差等问题,最近几个月来AI视频赛道上的大小玩家也都开始在产品玩法上进行升级。

一个典型的例子便是Pika。自去年年底发布首个视频模型产品Pika1.0迅速走红后,Pika一度淡出大众视野。直到最近推出一系列特效模板,才再次在海内外社交媒体上引起广泛关注,吸引大量UGC用户前来创作和打卡,从而助推了一波用户增长。

据新榜发布的10月AI产品榜,Pika在海外榜的排名蹿升39位,成功跻身海外榜Top10。

上下滑动查看更多

可以预想的是,这种以流量为导向的产品策略,虽然短期内能够带来用户增长,长期转化效果就不太明朗了,早前爆火过一波的AI写真产品妙鸭就是“前车之鉴”。

我们截取了几大热门视频模型过去28天(以11月1日为起始点倒推)海外网站访问流量变化,发现Pika分别在10月13日和10月22日迎来流量高峰,甚至一度超过了可灵的热度。

来源:SimilarWeb

但在10月22日之后,Pika的网站访问量便一路呈现下滑趋势。

而可灵、海螺AI等在海外强势走红的国产AI视频产品流量趋势就相对平稳,且整体流量水平高于海外的视频模型产品。

回过头再看,在底层视频模型未能实现重大突破的情况下,无论是Kaiber还是Pika,给出的都是治标不治本的解决方案。

毕竟,AI生成的视频如何保持人物画面一致性、运动符合物理规则,这些底层技术能力的提升才是触及用户深层需求的关键痛点。

Kaiber工作流搭建地址:

https://www.kaiber.ai/superstudio/

Krea AI官网地址:

https://www.krea.ai/apps/video/v2


返回网站首页

本文评论
马斯克:特斯拉目标年产200万辆Cybercab无人驾驶出租车_特斯拉无人驾驶概念股
10月24日 消息:特斯拉今日发布了2024年第三季度的财报,数据显示该季度营收达到251.8亿美元,净利润为25.05亿美元,同比增长8%。在随后的财报电话会议上,特斯拉首席执行官马斯克透...
日期:10-24
砥砺铸秋实 风劲更远航  ——记中国联通2023年度集团级劳模风采_联通集团劳模退休待遇
通信世界网消息(CWW)2023年,中国联通涌现出一大批先进模范人物,他们奋斗在不同岗位,有的大胆创新攻坚克难,寻求尖端技术突破,用领先科技赋能数字化建设;有的不断钻研专业技能,提高自...
日期:01-10
iphone第三方维修后官方还能修吗iPhone对第三方维修正式解除限制,果粉狂喜
来源:中关村在线2024年初,俄勒冈州州长签署了"SB 1596"法案,成为美国首部禁止数码设备厂商使用序列化解决方案的法律,直接针对苹果公司。面对这一形势,苹果放宽了对第三方维修的...
日期:08-05
已接触博通等公司开发全新AI芯片,OpenAI迈步7万亿美元芯片帝国目标_博通芯片股票
7 月 19 日消息,科技媒体 The Information 今天(7 月 19 日)报道,OpenAI 公司已接触博通(Broadcom)在内的多家芯片设计商,共同探讨研发全新的 AI 芯片。中芯国际10nm进展OpenAI 公...
日期:07-19
苹果计划在云端使用 M2 Ultra 芯片j进军人工智能领域_苹果m2芯片百度百科
5月10日 消息:近日,苹果公司宣布了一项重大计划,他们计划通过将复杂的查询卸载到数据中心运行的M2Ultra芯片上,并转向更先进的M4芯片,开始进军生成式人工智能领域。据彭博社报道...
日期:05-10
传英国拟斥资1.3亿美元采购GPU,充当"国家AI研究资源"
8月21日消息, 为了在全球计算能力竞赛中迎头赶上,英国首相里希·苏纳克(Rishi Sunak)计划斥资1亿英镑(约合1.3亿美元)购买数千颗高性能人工智能芯片。据悉,英国政府官员始终在与英...
日期:08-21
美智光电属于哪个公司「美智光电用产品价值引领市场 ,不忘初心,以“健康光”造境」
近年来,大健康产业进入了一个高速发展的阶段。针对青少年的近视人数逐年攀升,更出现了近视少龄化的趋势。常言道“眼睛是心灵的窗户”,学子的身心健康是民生大计,受到各界的高度...
日期:08-02
当腰部达人成为“中流砥柱”,我们需要关注什么?_腰部视频教程
声明:本文来自于微信公众号 TopKlout克劳锐(ID:TopKlout),作者:TopKlout克劳锐,授权转载发布。近年,众多腰部达人声量渐起,逐渐被用户和品牌“看见”。对于品牌来说,优质的腰部达人...
日期:01-03
“技术派”萤石下放硬核视觉技术,新品清洁机器人拥抱具身智能时代
10 月 12 日, 2023 萤石清洁机器人新品发布会在杭州举行。发布会上,萤石发布了扫拖一体机器人RS20 Pro和云视觉商用清洁机器人BS1,实现家用、商用清洁场景全覆盖,更丰富的产品...
日期:10-15
6次敲诈海底捞被判7个月:一名女子多次在调料碗中投放死虫子_海底捞打人视频
近日,一起涉及海底捞的敲诈案件引起了公众的广泛关注。一名女子李某因在海底捞火锅店内多次投放死虫子进行敲诈,被推上了微博热搜。据报导,李某先后六次将死虫放入海底捞的调料...
日期:10-11
等等党泪目!曝华为Mate60 Pro溢价降低 平价货源将至_2022年华为mate60
  【手机中国新闻】华为Mate60系列是目前手机市场上绝对的抢手货,用“一机难求”来形容一点也不过分。不仅如此,在一些非官方渠道,华为Mate60系列的加价情况也是非常普遍的。...
日期:10-23
首创“RTR”  知乎告诉你什么是可信赖的广告(知乎推荐广告)
  不同的声效下,水里的小鱼会做出怎样的反应?在2018年双11大战期间,知乎做了这样一个有趣的实验,在水下给小鱼做了不同的听力测试,这个看似科普式的互动内容目的为了推广索尼...
日期:08-06
西安不倒翁小姐姐回应生娃后变憔悴:少贩卖焦虑_西安不倒翁姐姐事件
近日,西安大唐不夜城的演员冯佳晨成为网络热议的焦点。一段“大唐女子绝美牵手”的短视频中,她扮演的“唐妞”宛如随风摇摆,轻舞罗扇,将中国唐朝美人的妩媚娇羞演绎得淋漓尽致。...
日期:02-11
华云大咖说 | 云计算云运维浅谈_云计算开发与运维
  随着企业上云成为共识,企业在享用云计算带来快捷服务的同时也要面对传统运维带来的挑战,那么如何对云服务进行规划与设计?如何让运维体系更加适应云的变化?如何快速部署...
日期:07-10
三星因“经济因素”将旗舰平板电脑Galaxy Tab S9系列推迟到明年发布
三星曾计划在今年推出Galaxy Tab S9系列,但由于包括经济在内的一些因素,该公司显然没有什么选择,只能推迟发布。Galaxy Tab S9系列原计划于2022年12月推出,但据The Elec报道,三星...
日期:10-16
世界物联网500强排行榜发布:奔赴万物互联数字新经济蓝海_物联网百强
世界物联网500强排行榜发布:奔赴万物互联数字新经济蓝海 通信产业网|2023-07-03 16:16:36作者:崔亮亮来源:通信产业网【通信产业网讯】(记者 崔亮亮)7月3日,在2023世界物联网500强...
日期:07-03
中国联通大批科技成果亮相2024世界智能产业博览会_中国联通全球产业链合作伙伴大会
通信世界网消息(CWW)6月20日,2024世界智能产业博览会在天津正式开幕。中国联通作为2024世界智能产业博览会战略合作伙伴以及重要参展单位,以“百年传承 三十向新 AI赋能数智未来...
日期:06-22
苹果系统备份微信聊天记录「微信 macOS 版 3.5.5 正式版发布,支持聊天记录迁移与备份」
IT之家 8 月 27 日消息,微信 Mac 版现已更新 3.5.5 正式版,更新日志显示,新版本修复了一些已知问题。zenfone6屏幕从网友反馈来看,微信 macOS 版跟 Windows 版一样,已经支持聊天...
日期:09-15
realme 11 Pro/Pro 通过3C认证:支持67W/100W充电器「realme原装充电器参数」
最近,真我realme的新机realme 11 Pro和11 Pro 已经通过中国3C认证,而且支持67W和100W两种不同功率的充电器。据报道,真我realme 11 Pro和11 Pro 手机将搭载6.7英寸曲面OLED显示...
日期:04-13