Runway 属于 AI 视频领域。它是一款最先推出模型的 AI 视频产品,目前仍维持着领先地位,并在不断快速迭代。
其产品定位更偏向影视、艺术表达,具有以下特点和优势:
Runway 由一家总部位于旧金山的 AI 创业公司制作,年初在互联网爆火。2023 年初推出的 Gen-2 代表了当前 AI 视频领域最前沿的模型,能够通过文字、图片等方式生成 4 秒左右的视频。致力于专业视频剪辑领域的 AI 体验,同时也在扩展图片 AI 领域的能力。目前支持在网页、iOS 访问,网页端有 125 积分的免费试用额度(可生成约 105 秒视频),iOS 有 200 多,两端额度不同步。
相关链接:
7月更新的Gen-3,支持Alpha Turbo(更快速)和Alpha(更强表现力)两种模式,增强了对极度复杂提示词描述的理解,对图像运动元素的识别也有所提升。能够实现富有想象力的过渡和场景中元素的精确关键帧。此外还支持设置图片作为动画首帧/尾帧,Gen3目前还不支持笔刷等高级调节能力。图片作为尾帧输入,更擅长从无到有地生成一些元素,下面的水墨画是一个特别好的案例file:68FP5xWnDBcP6z8e.mp4By Halim Alrasihi单次生成视频时长也达到了最长10s,支持延长到40s,达到当下AI视频产品输出的最大长度。file:Runway extend 40s.mp4此外,Gen-3 Alpha Turbo还支持了竖屏尺寸视频生成、加大力度发力视频到视频(风格转绘)能力,并表示即将推出更多控制能力。
Gen-1Gen-1的主要能力有:视频生视频(Video 2 Video)、视频风格化、故事版(将实体模型风格化)、遮罩等其中,仅支持视频生视频是Gen-1和Gen-2的最大差异。Gen-1使用流程:Gen-1能力介绍:https://research.runwayml.com/gen1Gen-1参数设置:https://help.runwayml.com/hc/en-us/articles/15161225169171也可以看这个视频学习Gen-1的详细设置方式:https://youtu.be/I4OeYcYf0Sc
[title]生成式AI在游戏领域的机会(市场假设+预测)[heading2]另一种途径是构建符合行业需求(垂直行业)工具套件,这些工具会专注于特定行业的生成式人工智能需求,深入了解特定的受众,并与现有的生产场景(Unity或Unreal)进行整合。(笔者注:上篇翻译的Coatue白皮书[AIGC的机会到底在何处?](http://mp.weixin.qq.com/s?__biz=MzI5MjE4NzYzNw==&mid=2247485825&idx=1&sn=79f5b5aa504f707d49f4d2ab15424df7&chksm=ec04751bdb73fc0d86776656ce64f5a13c4561a41f2339c1f2697288f168f3e5e7fc17e25125&scene=21#wechat_redirect)其中提到了Adobe和Office套件与AI的结合,类似的需求也存在游戏领域,值得关注)一个典型的例子是Runway,Runway针对视频创作者的需求,提供人工智能辅助工具,如视频编辑、绿屏移除、内画和运动跟踪,这样的工具可以随着时间的推移增加新的应用场景。目前还没有看到像Runway这样的游戏工具出现,但这是一个有潜力的领域。