火山引擎视频云实践精选集 2024 版
火山引擎视频云致力于打造“面向体验 驱动增长”的视频云，积极探索将豆包大模型和 AI 能力与音视频能力相结合，帮助企业端到端提升视频智能化能力，实现体验的全面提升与业务的创新增长。精选集内容将围绕火山引擎视频云在过去一年的 AI / 大模型&音视频技术实践，包括 ASIC 编码器、VR 处理、深度学习、质量评估等全球前沿的论文精选；对话式 AI、 6DoF 互动、场景重建、超低延时等前沿技术的落地实践； AI+ 教育、私域直播、短剧出海、VR 大空间等行业场景的最佳实践。
火山引擎在国际上屡获殊荣，在 AIM2024 大赛视频显著性预测赛道和超分质量评估赛道夺得冠军，并联合中国科学技术大学 IMCL 团队夺得 NTIRE 大赛盲压缩图像增强赛道冠军，同时火山引擎国际深度学习图像压缩挑战赛蝉联冠军。此外，火山引擎的多篇论文入选国际会议 ACM IMC'24 最佳论文提名，并在 MSU 世界视频编码器大赛中斩获“最佳 ASIC 编码器”称号。
火山引擎视频云认为，AI 视频时代，视频体验将经历生产、交互、消费的全链路升级，开启“三智”视频新时代。在生产端，AI 将降低视频生产门槛，内容生产将发展到 AIGC 阶段；在交互端，音视频将演变成人类的新的“通用”语言，交互形式将更加丰富、更生动；在消费端，用户的交互空间也在从 2D、3D，VR 拓展到了虚拟世界与现实世界的无缝融合。
为了应对 AI 视频时代的挑战，火山引擎视频云推出了多模态视频理解与生成方案、对话式 AI 实时交互解决方案、基于 AI 的 3D 生成方案等，并联合英特尔共同发布了 BMF 大模型训练视频预处理方案。同时，火山引擎还通过海量的潮汐资源和精细化的混部调度来降低单用户的平均使用成本，并使用多种算法对视频进行多维度的分析和筛选，提升算法迭代效率。
精选集中收录了火山引擎视频云在 AI / 大模型&音视频技术实践方面的多个案例，包括与乐鑫、移远合作的智能硬件注入“豆包”方案、儿歌点点携手共创儿童成长 AI 伙伴、龙游神州云 VR 大空间技术魔法、火山引擎升级「社区团购+直播」新玩法、助力企业玩转私域电商、FlexTV 短剧乘“云”出海、正大集团的视频巡检建设之路等。
火山引擎视频云认为，AI 视频时代的到来理所当然，但如何定义 AI 视频时代，这曾是火山引擎视频云内部，一个长期的思考题。经过复盘总结，火山引擎视频云认为，围绕视频，他们的时代，可以被分为三个阶段：信息时代、数字时代、AI 视频时代。AI 视频时代，自然也不等同于传统的数字视频时代加上 AI 能力，故事依旧要回到生产、交互、消费的叙事中来。
未来，火山引擎视频云将持续深耕技术研发，依托高性能算力和低延迟传输方案，为各类互动场景提供有力支持，让更多用户畅享云技术带来的流畅高清影音体验。
