2024人工智能Sora文生图视频行业分析报告

敬请参阅最后一页特别声明 1  Sora问世，视频创作领域迎来“iPhone时刻”。2023年2月15日，OpenAI发布视频生成大模型Sora，通过文本指令，Sora可以直接输出长达60秒的高清视频，包含高度写实的背景、复杂的多角度镜头以及富有情感的多角色叙事，更为可贵的是，Sora生成的视频表现出对于真实世界物理常识的深刻理解。部分媒体报道惊叹——“Sora之后，现实将不再存在”。从本轮AI应用端发展实践来看，以文本创作（小说、剧本）、图像创作（绘画、平面设计、摄影）、视频创意（广告、短视频、传统影视、游戏）为代表的创意创作领域因其高容错率、高投入度，在AI浪潮之初就被市场广泛认为将会成为最先被AI深刻赋能的产业之一；从本轮AI模型发展演绎来看，以ChatGPT为代表的文本创作以Midjourney、Stable Diffusion为代表的图像创作以Runway、Sora为代表的视频创作的发展速度无疑是极为惊人的。我们认为，从文字到图像到视频，AI内容创作的信息升维越来越考验模型的创作效率与生成结果的稳定性（早期版本的Midjourney存在生成时间长、生成结果违背物理常识或者“AI感”明显的问题；Run way Gen-1/2也存在生成视频时长较短且生成视频逻辑连贯性较弱等缺陷），但正如Midjourney V5/6已逐步广泛实现多行业的商业化落地，我们认为Sora的问世有望推动着视频创作领域的“iPhone时刻”到来。  Sora取法Toke ns文本特征标记，是基于Patches视觉特征标记的Diffusion Transformer模型。OpenAI研究团队从LLM中汲取灵感，认为LLM范式的成功在一定程度上得益于Tokens的使用，故而通过将视频信息分解为带有时空特征的Patches训练了Diffusion Transformer模型。从训练角度而言，基于Patches视觉特征标记对原生视频进行采样扩大了可用样本的规模且省去了标准化样本的步骤。从推理角度而言，基于原生视频训练的模型在生成新视频方面改善了构图和取景。OpenAI目前发布的Sora视频大模型主要具备文生视频、视频编辑、文生图三类功能，在文生视频过程中，用户通过输入Prompt提示词DALL·E生成图像Sora生成视频。  文生图和文生视频是当下AI应用端落地焦点，海外相关技术产品迭代迅速。据Discord，按邀请页面流量排序的十大AI应用程序中，有5个是图片生成应用程序，2个是音频生成应用程序，2个是视频生成应用程序，其中，Midjourney位列第一，Pika位列第二，图片约占前10名流量的74%，视频约占前10名流量的8%。文生图领域，海外有Adobe（老牌创意软件巨头，现已发布下一代Firefly支持多种文生图功能）、Midjourney（文生图模型新锐，现已广泛实现商业化落地）。文生视频领域，海外有Pika（AI初创公司，支持一键生成3秒共计72帧视频）、Runway（拥有最早商业化的T2V模型Runway Gen-2）。  国内推荐关注万兴科技和美图公司等创意软件龙头投资机会。万兴于2023年9月宣布即将发布国内首个专注于以视频创意应用为核心的百亿级参数多媒体大模型“天幕”，具备一键成片、AI美术设计、文生音乐、音频增强、音效分析、多语言对话等核心能力。2022年底至2023全年万兴对旗下T2V/I多款拳头产品进行AI功能更新，AI赋能之下订阅收入占比及订阅续约率取得双增。美图公司于2023年12更新视觉大模型MiracleVision 4.0，具备文生视频、图生视频、视频生视频等多模态能力，AI赋能之下订阅业务收入占比逐年增长。  Sora开启创意领域新纪元，国内推荐关注万兴科技、美图公司、虹软科技、科大讯飞；海外推荐关注Adobe。  海外基础软硬件使用受限的风险；AI应用落地不及预期的风险；行业竞争加剧风险。 行业深度研究 敬请参阅最后一页特别声明 2 扫码获取更多服务 扫码获取更多服务 内容目录 1．OpenAI视频大模型Sora：不止于视频，剑指世界模型，初步理解物理规律 ...............................................4 1.1 Sora问世：OpenAI发布视频生成大模型，剑指物理世界通用模拟工具...............................................4 1.2 技术路径：基于Patches视觉特征标记的Diffusion Transformer模型 .................................................4 1.3 算法实现：Patches实现更灵活的采样+更优化的构图 ........................................................................5 1.4 功能解读：文生视频+视频编辑，确保“物理世界常识”始终在场的通用模拟工具...................................7 2. 文生图/视频海外标杆：AI应用端焦点，技术及产品迭代迅速 .......................................................................8 2.1 文生图/视频为当下AI应用焦点：相关产品流量排序名列前茅 .............................................................8 2.2 文生图-T2I（Text to Image）：Diffusion 模型奠定文生图商业化基石，新老玩家广泛入局 ...................9 2.2.1 Adobe：老牌创意软件巨头向AIG出征，发布下一代Firefly支持多种文生图功能 .......................10 2.2.2 Midjourney：文生图模型新锐，提升创意设计工作效率，广泛实现商业化落地 ............................ 11 2.3 文生视频-T2V（Text to Video）：创意产业工作流变革前夜，MGC时代大幕下的先行者 ................... 11 2.3.1 Pika：AI初创公司发布1.0工具，支持一键生成3秒共计72帧视频 ...........................................13 2.3.2 Runway：拥有最早商业化的T2V模型之一-Runway Gen-2 ........................................................14 3. 文生图/视频国内映射：万兴、美图头部标杆，相继发布视觉大模型，订阅收入占比势能向上 ....................14 3.1 万兴科技：发布“天幕”大模型整合T2V/I能力，AI赋能订阅及续约率双增 .........................................14 3.2 美图公司：自研视觉大模型MiracleVision 4.0，订阅业务收入占比逐年增长 .....................................18 4. 投资建议 ...................................................................................................................................................19 5. 风险提示 ...................................................................................................................................................19 行业深度研究 敬请参阅最后一页特别声明 3 扫码获取更多服务 扫码获取更多服务 图表目录 图表1： OpenAI发布文生视频大模型Sora.....................................................................................................4 图表2： Sora技术路径：基于Patches视觉特征标记的Diffusion Transformer模型 .......................................5 图表3： Why Patches？——更灵活的采样+更优化的构图 ..............................................................................6 图表4： 基于DALL·E 3 DCS的描述性标题重述与基于GPT的标题扩写 ........................................................7 图表5： Sora功能一览：文生视频+视频编辑，确保“物理世界常识”始终在场 .................................................8 图表6： Midjourney高居AI产品流量榜首 ......................................................................................................9 图表7： AI图片生成约占前十AI产品流量的74% ..........................................................................................9 图表8： T2I模型近年来加速迭代演进.............................................................................................................9 图表9： Diffusion模型的前向阶段噪声化和逆向阶段去噪过程 ......................................................................10 图表10： Adobe Firefly目前能够支持的部分AI功能 ....................................................................................10 图表11： Midjourney文生图创意作品已广泛商业化落地 ............................................................................... 11 图表12： Latent Video Diffusion模型基于文字描述与初始图像编辑视频.......................................................12 图表13： 以Sora为代表的T2V大模型有望深刻改变影视产业工作流 ..........................................................13 图表14： Pika 1.0工具主要功能...................................................................