字节跳动机器人技术路线、人员变动与后续展望
背景
- 部门整合:字节跳动将AI Lab与Seed实验室合并为C实验室,AI Lab定位由技术中台下降,并入C实验室。
- 人员变动:AI Lab主任李航退休返聘,C实验室负责人由前谷歌DeepMind副总裁吴永辉担任,AI Lab并入C实验室后,李航向吴永辉汇报。
核心人物
- 李航:AI Lab前主任,计算机科学博士,研究方向为自然语言处理、信息检索、机器学习和数据挖掘,资历深厚,近期退休返聘。
- 孔涛:AI Lab技术研究总监,清华大学博士毕业,主导建立了AI Lab的机器人研究团队,开发了先进的机器人系统技术,2024年离职创业。
- 吴永辉:C实验室负责人,前谷歌DeepMind副总裁,拥有17年谷歌工作经验,擅长大模型和多模态大模型研究。
技术路线
- 孔涛时期:带领团队从图像识别到真实世界反馈,最终到VLM大模型,开发了GR1、GR2等具身大模型,采用互联网视频训练方法,创新性强但硬件落地缓慢。
- 吴永辉时期:引入更主流的技术路线,预计将加大对VLM和VLM大模型的投入,可能不再继续GR2路线。
研究方向
- C实验室研究方向:推理能力边界、感知能力边界、软硬体、下一代学习范式、多模态大模型。
- VLM大模型:预计将重视VLM大模型,但短期内尚未看到过多动作。
结论
- 部门整合与人员变动:反映字节跳动面临挑战,通过整合资源引入强领导力应对。
- 孔涛离职原因:创新路线与公司短期落地需求不符,资源短缺导致硬件落地缓慢。
- 未来展望:C实验室可能重新起步,引入新人才和技术,但GR2路线可能不再继续。