舜为科技AI眼镜解决方案及AI+AR可能性探讨研报总结
一、公司背景与定位
浙江舜为科技有限公司成立于2021年,总部位于杭州,占地面积18000㎡。公司依托舜宇集团在光学、光电领域的深厚积累,专注于XR(扩展现实)行业,致力于成为全球领先的XR系统方案解决商。舜为科技整合了舜宇集团的光学团队、供应链资源、卓越制造能力,并与虹软、网新等公司合作获取软件、算法等核心资源,形成全生命周期质量管理体系,并在上海设立办事处。
二、智能眼镜方案演进路径
研报详细阐述了智能眼镜的演进路径,从简单的音频赋能阶段逐步发展到集成AR功能的复杂形态:
- 智能音频眼镜:以眼镜为载体,集成多麦克风阵列,支持降噪、远场拾音、3D音频和语音交互功能,实现初步的增强体验。
- 智能眼镜+Camera:通过摄像头实现拍照分享功能,支持第一视角拍照、AI大模型连接、多模态识别等,提升信息获取能力。
- 智能眼镜+Camera+光学+眼动:进一步集成光学显示和眼动追踪技术,实现AR功能显示、虚实融合、AI轻量级多模态模型端侧落地,并通过眼动交互提升效率。
- 智能眼镜+Camera+光学:最终形态集成摄像头和光学显示模块,支持信息提示、图像预览、AR显示等功能,实现多维度信息获取。
三、智能眼镜的关键技术
研报重点分析了智能眼镜的三大核心技术:摄像头、音频和眼动追踪。
1. 摄像头技术
- 高质量影像:采用高分辨率传感器(12MP)、畸变控制镜头、动态场景适应算法、防抖技术,优化低光环境下的拍摄效果。
- 续航与轻量化设计:摄像头模组小型化、低功耗,结合HDR和多帧合成技术,满足全天候佩戴需求。
- 应用场景:支持直播、AI识人识物等场景,满足市场对拍摄效果和性能的综合需求。
2. 音频技术
- 多麦克风阵列:2-5麦克风阵列支持VPU近场降噪、Nmos4.4远场降噪,实现3m佩戴“分区”屏蔽非佩戴者语音,30cm低功耗唤醒。
- 语音交互:支持语音命令控制、语音识别和语言翻译,解放双手。
- 扬声器技术:开放场立体声高保真扬声器,结合算法实现空间音频,提供更真实的声场体验。
- 功能优化:大振幅单元提供优质低音,0.6mm漏音保护,近耳声场佩戴不入耳,声音自然。
3. 眼动追踪技术
- 技术方案:采用单IR相机+单LED+RGB场景相机,具有Glint-Free优势,算法功耗及系统功耗相对较低,器件少、成本低、布线简易。
- 功能:支持滑移补偿、佩戴检测、IPD检测、视线深度输出等,实现视线移动精准控制。
- 优势:提升交互效率,减少对语音和触控的依赖,结合注视点渲染技术,降低计算负荷。
四、AI+AR方案仍存在的挑战
尽管AI+AR技术潜力巨大,但仍面临以下挑战:
- 功耗、散热、续航:设备小型化和轻量化带来的功耗问题需要解决。
- 近眼显示技术:近眼显示技术仍需突破,以提升用户体验。
- 交互准确性与稳定性:眼动交互的准确性和稳定性需要进一步优化。
- 设备小型化与轻量化:如何在保证功能的同时实现设备的小型化和轻量化,是技术难点。
五、AI+AR潜在应用场景
AI+AR技术具有广泛的应用前景,包括:
- 导航与出行:结合眼动追踪,提高交互效率。
- 健康与日常辅助:视障辅助(如弱视群体、功能性盲)、心理分析(眼球追踪、微表情捕捉)、视觉补偿等。
- 实时翻译与跨语言交流:结合AI技术实现实时翻译。
- 户外直播:支持直播功能,提升信息传播效率。
六、舜为AI智能眼镜解决方案
舜为科技提供两种AI智能眼镜解决方案:
- 舜为AI智能眼镜解决方案:
- 技术亮点:超广角高清RGB Camera、1080P+EIS高清录像、语音降噪、语音唤醒和语音交互、AI多模态。
- 关键参数:重量38g、防尘防水等级IPX4、12MP传感器、环境光传感器、距离传感器、IMU、6轴A+G、2麦克风、4mic平台、AR1、4GB LPDDR4X+32GB eMMC、Wi-Fi6/6E、蓝牙BT5.3、Type C接口、220mAh电池、充电盒支持。
- 舜为一体式AR眼镜解决方案:
- 技术亮点:衍射波导搭配Micro LED光学显示方案、高通AR1平台、超广角高清RGB摄像头、降噪、语音唤醒和语音交互、空间音频。
- 关键参数:重量<80g、光学方案衍射光波导显示RGB micro LED、FOV30°、瞳距64mm、12M传感器、Ambient light sensor、P-sensor、IMU 6-axis A+G、2麦克风、3mic平台、高通AR1、4+32GB RAM+ROM、Wi-Fi6/6E、蓝牙5.3、按钮、触摸功能、Type C USB3.0接口。
七、研究结论
舜为科技通过整合光学、光电、软件、算法等资源,形成了完整的智能眼镜解决方案,并在AI+AR领域展现出强大的技术实力和应用潜力。未来,随着技术的不断突破和应用场景的拓展,智能眼镜有望在导航、健康、实时翻译、户外直播等领域发挥重要作用。然而,仍需解决功耗、显示技术、交互稳定性等技术挑战,以推动智能眼镜的普及和商业化。