AI智能总结
2024年3月20日 证券研究报告 行业研究 2024年3月20日 本期内容提要: ◆近期AI+3D新产品产业催化汇总。英伟达CEO:NVIDIA 3D平台Omniverse Cloud将可以连接到苹果公司混合头显Vision Pro;3D素材赋能Sora等文生视频工具深度学习;Stability AI公司发布全新的AI生成3D大模型TripoSR,效果惊艳。 ◆DUSt3R技术储备丰厚,助力AI深度学习3D重建,工业应用未来可期。DUSt3R该框架可根据拍摄的图像重建3D模型,无需相机校准。此外,DUSt3R支持单目和双目视图,能生成深度图等,为后续分析和应用提供了丰富数据。 ◆谷歌所推出的DreamFusion项目,突破3D模型训练样本数量问题。该项目结合SDS与NeRF技术,将二维图像扩散模型转化为三维模型,无需依赖三维训练数据。DreamFusion生成的3D模型几何表现优秀。 ◆英伟达发布GET3D和Magic3D两大创新工具,重塑元宇宙内容创建流程。GET3D利用2D图像训练,生成高保真纹理和复杂几何细节的3D图形。而Magic3D能在40分钟内创建带有彩色纹理的3D网格模型,且支持根据提示词编辑已创建的模型。 ◆OpenAI发布了开源的Shap-E模型,能快速创建准确的3D模型,成本效益显著。该模型可生成纹理网格和神经辐射场两种3D表示形式,支持多样化渲染和导入其他3D应用,展现出在游戏开发等领域的广泛应用前景。 ◆阿里巴巴发布Object Drawer,是首个基于神经渲染的商品三维建模产品。该技术可重建多种商品模型,低成本高保真。通过优化网络结构和几何先验,提升推理和训练速度,实现快速推理高分辨率图像。支持实时高清交互三维展示,解决光照和纹理问题,提升渲染效果。 ◆商汤科技发布两款3D内容生成平台:格物与琼宇,满足不同行业对于可交互3D实景内容的需求。格物专注于小物体的高精度重建与交互,适用于商业广告、商品营销等领域;琼宇则实现城市级大空间的3D内容生成,支持数字孪生、影视创作等。 ◆普林斯顿大学发布的Infinigen AI,为计算机视觉领域提供了强有力的工具。Infinigen AI能生成自然界的植物、动物等场景并自定义地形和自然现象,为计算机视觉领域提供了新的数据生成和场景模拟方法,适用于3D视觉研究。 信达证券股份有限公司CINDA SECURITIES CO.,LTD北京市西城区闹市口大街9号院1号楼邮编:100031 ◆Adobe联合开发的DMV3D,在高效率生成高保真3D图像方面表现出色。这是一种基于transformer的3D大型重建模型,能在单个GPU上快速生成高保真3D图像,避免繁琐的单独训练和优化步骤。 ◆Epic Games推出的MetaHuman,大大缩短传统建模的时间及资源。支持云端快速创建高度逼真的3D角色,并允许高度自定义。它简化了3D建模的复杂性,消除了对高端硬件的需求,可与虚幻引擎5紧密集成。 ◆Unity为开发者提供更强大和灵活的创作工具。UnityMuse利用NLP技术 生成3D模型、纹理和动画;Sentis集成AI模型实现文字转语音、智能NPC等功能;Meshy提供多种AI功能,生成3D图形速度快;Unity 6预计带来高性能渲染与WebGPU图形后端。 ◆风险因素:宏观经济波动风险、MR设备市场销量不及预期风险 目录 一、短期AI+3D产业催化汇总..........................................................................................................4二、DUSt3R.........................................................................................................................................4三、谷歌:DreamFusion.....................................................................................................................5四、英伟达:GET3D和Magic3D.....................................................................................................6五、OpenAI:Shap-E..........................................................................................................................7六、阿里巴巴:Object Drawer...........................................................................................................8七、商汤科技:格物、琼宇...............................................................................................................9八、普利斯顿大学:Infinigen AI.....................................................................................................10九、Adobe:DMV3D........................................................................................................................11十、Epic Games:MetaHuman............................................................................................................8十一、Unity:Muse、Sentis、Meshy(插件)和Unity6...............................................................13十二、风险因素.................................................................................................................................16 图目录 图1:英伟达GTC发布会上Omniverse适配Vision Pro展示........................................................4图2:Sora的效果展示.......................................................................................................................4图3:TripoSR的效果展示.................................................................................................................5图4:DUSt3R的效果展示.................................................................................................................5图5:DUSt3R的算法结构.................................................................................................................6图6:DreamFusion的效果展示.........................................................................................................7图7:DreamFusion算法架构.............................................................................................................7图8:GET3D的效果展示..................................................................................................................8图9:GET3D的算法结构..................................................................................................................8图10:Magic3D的效果展示..............................................................................................................9图11:Magic3D的算法结构..............................................................................................................9图12:Shap-E的效果展示...............................................................................................................10图13:Object Drawer的效果展示...................................................................................................11图14:NeRF技术原理示意.............................................................................................................11图15:琼宇的效果展示....................................................................................................................12图16:琼宇的技术储备....................................................................................................................12图17:Infin