目前在视频生成领域,以下几个 AI 表现较为突出:
此外,以下是其他视频生成的 Top10 产品及相关数据: |排行|产品名|分类|4 月访问量(万 Visit)|相对 3 月变化| |-|-|-|-|-| |1|InVideo|其他视频生成|736|-0.118| |2|Fliki|其他视频生成|237|-0.165| |3|Animaker ai|其他视频生成|207|-0.076| |4|Pictory|其他视频生成|122|-0.17| |5|Steve AI|其他视频生成|76|-0.119| |6|decohere|其他视频生成|57.5|-0.017| |7|MagicHour|其他视频生成|53.7|-0.071| |8|Lumen5|其他视频生成|51|-0.149| |9|democreator|其他视频生成|41.9|-0.136| |10|腾讯智影|其他视频生成|35.4|0.131|
本文作者Bay,写于24.09月底,关注公众号“Bay的设计奥德赛”接受及时推送[heading1]前言-AI视频产品近半年发展[content]Sora之后,DiT架构成为视频生成产品的主流技术。这大半年里,横空出世的Luma AI、Kling成为视频生成领域最大黑马,而老牌选手Runway也推出了实力强劲的Gen3模型。AI视频生成在画面表现力、语义理解、清晰度、可控性方面有了大幅提升,同时多家产品在音画同步、笔刷等工具上做了更新,提升了产品可控性。这篇文章会带大家了解AI视频产品的最新能力,不同产品优势及展示各个产品实测效果。这个系列预计分为闭源、开源两篇。以下是本文目录:
Dream Machine目前功能很简单,目前仅支持txt2vid文生视频和img2vid图生视频两种能力,除了相机运动,另外支持Extend延长4s、循环动画、首尾帧动画能力。[heading3]txt2vid文生视频[content]8月底最新发布的Dream Machine 1.5增强了提示词理解能力和视频生成能力,令我惊讶的是,Luma对视频内文字的表现也非常强,这是除Runway Gen3、海螺AI以外的产品目前无法实现的效果。[Luma txt2vid.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/DACKbCHYIoyQ1OxSAh7cKcywneE?allow_redirect=1)[heading3]img2vid图生视频[content]前阵子我在对各个产品最新模型做测评,感慨于Pika labs效果很好但过于模糊,Runway则总是生成诡异的运动…这些产品的表现仿佛都和宣传片有很大区别。而这正是Luma AI本次更新中最惊艳的一趴,官网公布的视频案例并没有骗人。其img2vid生成效果在多方面远超Pika labs、Runway等产品,是目前可公开体验的AI视频生成领域的王者之一,主要体现在以下方面:生成时长较长(5s),24帧/s,非常丝滑运动幅度更大,能产生相机的多角度位移[Twitter video.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/R3Dsb1bGSoKeulx4CPMcNFhPnng?allow_redirect=1)提示词中增加无人机控制的视角变化By:edmondyang运动过程中一致性保持的比较好,有时仿佛图片变成了3D模型分辨率高,且有效改善了运动幅度大带来的模糊感,这点是pika labs一直以来困扰我的问题
|排行|产品名|分类aiwatch.ai|4月访问量(万Visit)|相对3月变化||-|-|-|-|-||1|InVideo|其他视频生成|736|-0.118||2|Fliki|其他视频生成|237|-0.165||3|Animaker ai|其他视频生成|207|-0.076||4|Pictory|其他视频生成|122|-0.17||5|Steve AI|其他视频生成|76|-0.119||6|decohere|其他视频生成|57.5|-0.017||7|MagicHour|其他视频生成|53.7|-0.071||8|Lumen5|其他视频生成|51|-0.149||9|democreator|其他视频生成|41.9|-0.136||10|腾讯智影|其他视频生成|35.4|0.131|