生成式AI+视频行业分析报告 ( 52 页)

---

目 录

一、生成式AI 发展进程，文生视频正成为当前AI 行业关键发展节点 ....... 6

二、目前市场主流的海外生成式视频参与者 ...... 15

三、目前市场主流的国内生成式视频参与者 ...... 28

四、从AI 生成到AI 剪辑，一站式AI 视频生成+编辑有望成为另一核心方向 ...... 34

五、 AI+视频发展方向展望 ....... 37

六、风险因素 ....... 39

表 目 录

表1：Transformer、Diffusion、DiT 模型的产品梳理 .... 12

表2：Runway 历年融资轮次、融资金额及对应估值 .... 18

表3：Luma AI、Pika、Runway Gen-3 Alpha、Sora 相同提示词生成视频的效果多维度比较 . 27

表4：海内外视频生成产品单视频所需成本比较（1 美元=7.28 人民币） ....... 28

表5：Adobe 数字媒体业务和数字体验业务预估市占率 ..... 42

表6：快影和剪映产品相关数据 ..... 46

表7：相关公司提供视频数据用于训练多模态大模型 ...... 48

表8：IP 类公司可基于AI+视频开发更多IP 衍生品 ...... 49

表9：部分公司对AI 短剧/AI 短片方向上的探索 .... 49

表10：相关上市公司估值表（截至2024.07.24） ...... 50

图 目 录

图1：生成式AI 发展进程 .... 6

图2：AI 应用地图梳理 ...... 6

图3：主流文生视频技术的演进路径 ...... 7

图4：AIGC 视频生成的技术演进路径 .... 8

图5：GAN 生成对抗网络运作原理 ...... 8

图6：Diffusion 扩散模型运作原理 .... 10

图7：WALT 视频生成模型搭建原理示意图 ...... 11

图8：Sora 基于DiT 模型生成图像视频 ...... 12

图9：2023 年生成式AI+视频时间表....... 15

图10：Luma AI Dream Machine 官网宣传文生视频功能 .... 16

图11：Luma AI Dream Machine 官网宣传前后帧输入图片生成连贯视频功能 ..... 17

图12：Luma AI Dream Machine 实测演示中会遇到不符合物理规律、物体对象缺失等问题. 17

图13：Runway 产品定价模式 ..... 18

图14：Runway Gen-1 视频生视频 ....... 19

图15：Runway Gen-1 视频生视频演示 ...... 20

图16：Runway Gen-2 文生视频效果表现较好 ....... 20

图17：Runway Gen-2 图生视频效果及笔刷功能表现较好 ....... 21

图18：Runway Gen-3 Alpha 通过运动画笔、高级相机控制、导演模式可以更精细控制运动 21

图19：Runway Gen-3 Alpha 两端提示词测试，效果较强 ..... 22

图20：Adobe 产品中引入第三方视频模型Pika 优化用户体验 .... 23

图21：Pika 文生视频界面及视频编辑核心功能 ..... 23

图22：Sora 合成的60 秒视频 .... 24

图23：OpenAI 扩散模型过程 ..... 24

图24：Sora 可进行多个视频的组合 ..... 25

图25：Luma AI Dream Machine 生成效果（电影质感，略微不符合物理规律 ...... 25

图26：Pika 生成效果（提示词理解、画面质感等方面有差距） ..... 26

图27：Runway Gen-2 生成效果（主角没有跟随镜头移动） .... 26

图28：Runway Gen-3 Alpha 生成效果（各方面表现均优秀） .... 27

图29：快手大模型产品矩阵及可灵AI 产品功能升级 ....... 30

图39：后续Firefly 关于多模态音频、视频方向上的功能展望 ...... 36

图40：Adobe Firefly 集成第三方大模型如Runway、OpenAI Sora 用于视频剪辑 ....... 36

图41：Captions AI Shorts 功能 ...... 37

图42：Captions AI AD Creator 功能 .... 37

图43：阿里达摩院“寻光”一站式视频创作平台视频编辑功能 ..... 38

图44：阿里达摩院“寻光”视频素材创作功能 ...... 38

图45：美图MOKI AI 短片产品 ...... 39

图46：商汤Vimi 人物视频生成 ..... 40

图47：智象大模型升级2.0 版本 ....... 40

图48：智向未来即将上线一站式分镜头故事创作视频生成功能 ..... 41

图49：Adobe Creative Cloud TAM 市场规模预测 ..... 42

图50：Adobe Express 在24 年4 月迭代AI 功能后，日活数骤然抬升并稳定提高 ...... 43

图51:Adobe Premiere Pro 引入第三方模型如Pika、OpenAI、Runway 生成视频 .... 43

图52：美图公司底层、生态层、应用层架构 ....... 44

图53：Vimi 在人物一致性功能支持下打造的数字分身打造AI 视频功能、AI 表情包功能 ....... 45