扎克伯格:Codec Avatars是元宇宙的临门一脚

在Lex Fridman最新一期播客中,扎克伯格在Meverse中展示了Codec Avatars技术,实现了照片级写实的远程虚拟互动。他详细解释了该技术原理、Quest 3的混合现实突破,并探讨了AI分身在元宇宙中的未来应用及随之而来的哲学问题。

马克·扎克伯格

导语

在Lex Fridman的最新一期播客中,主持人与Meta CEO马克·扎克伯格进行了一场极具未来感的对话。两人身处相距数百英里的不同地点,却通过Meta的Codec Avatars技术,在虚拟空间中以照片级写实的3D形象“同处一室”。这次对话不仅是一次技术展示,更深入探讨了元宇宙的核心愿景:如何通过技术打破物理隔阂,实现人类有深度、有临场感的连接。扎克伯格阐述了该技术的原理与挑战,展望了即将发布的Quest 3混合现实设备,并分享了对未来AI化身与数字身份的深刻思考。

大纲与深读 8 章

展开「深读」看每一段讨论的问题与论据。

01

Codec Avatar技术与临场感体验

  • Lex与扎克伯格通过Codec Avatar实现了跨越数百英里的超写实对话,感觉如同在同一房间。
  • 该技术通过扫描捕捉面部细微表情和不完美之处(如雀斑、皱纹、不对称),以提升沉浸感和真实感。
  • 相比传输完整视频或3D场景,Codec Avatar编码面部表情数据,带宽效率更高。
深读这一段

讨论的问题:Codec Avatar技术如何通过捕捉面部细节和表情来创造临场感?

论据 / 案例:扎克伯格解释Codec Avatar扫描过程并展示当前体验;Lex提到面部细微瑕疵(如雀斑、颜色变化、皱纹)对沉浸感的重要性。

02

技术普及与未来应用场景

08:00
  • 目标是通过智能手机快速扫描(2-3分钟)生成高质量Codec Avatar,降低用户门槛。
  • 技术将逐步整合到Meta的应用程序中,首先应用于生产力场景(如Workrooms虚拟会议)。
  • 未来与混合现实结合,可实现远程参与者以超写实形态出现在物理环境中。
深读这一段

讨论的问题:如何让Codec Avatar技术更普及,并整合到日常应用中?

论据 / 案例:扎克伯格提到手机扫描项目已在进行中;提及Workrooms会议中用户对Avatar表现力的反馈;Q3混合现实设备将支持数字人物叠加到物理世界。

03

Q3混合现实设备革新

16:00
  • Q3是首款主流混合现实设备,价格仅500美元,混合现实功能甚至优于更贵的Q Pro。
  • 关键改进包括:混合现实摄像头和传感器分辨率提升数倍、搭载定制版高通新一代芯片、设备厚度减少40%。
  • 混合现实让VR体验更安全舒适,用户能看到物理环境,避免碰撞物体,同时保持沉浸感。
深读这一段

讨论的问题:Q3混合现实设备的核心升级和体验优势是什么?

论据 / 案例:扎克伯格对比Q3与Q Pro的混合现实效果;提及Q3芯片更强但成本仅为前者的三分之一;描述射击游戏等场景中混合现实的安全优势。

04

手部追踪与物理世界融合

24:00
  • Q3无需控制器即可实现高精度手部追踪和手势识别,延迟极低。
  • 通过外部摄像头实时捕捉多角度3D空间,并通过AI校正与用户视角对齐,实现物理与数字的无缝叠加。
  • 技术挑战在于实时计算复杂空间映射,并生成自然的增强现实视图。
深读这一段

讨论的问题:混合现实如何实现物理与数字世界的实时融合?

论据 / 案例:扎克伯格提到钢琴学习演示,显示手部追踪与物理桌面精确匹配无延迟;描述摄像头捕捉3D空间并通过AI进行透视校正。

05

AI赋能与个性化交互

32:00
  • 未来会议中,AI可以化身超写实Avatar作为团队工程师参与讨论。
  • 创作者可构建AI分身,在元宇宙中代表自己与社区互动,满足粉丝交流需求。
  • Meta推出多种AI人格,包括实用助手、商家服务、娱乐角色(如Snoop Dogg担任游戏地牢主)。
深读这一段

讨论的问题:AI如何以超写实或虚拟形象融入未来的社交与工作场景?

论据 / 案例:扎克伯格设想AI工程师以Avatar加入会议;提到创作者AI分身计划及AI Studio平台;举例Snoop Dogg作为AI地牢主。

06

身份认同与伦理挑战

40:00
  • 超写实Avatar可能不反映用户当前实时状态(如发型、体重),引发身份认同问题。
  • 用户可能为扫描刻意调整状态(如减肥),数字自我与物理自我的差异带来哲学思考。
  • 需研究与已故亲人数字形象互动的心理影响,平衡慰藉与健康边界。
深读这一段

讨论的问题:超写实数字形象对自我认知和社会关系带来哪些新挑战?

论据 / 案例:Lex提到Avatar发型与物理现状不同;扎克伯格讨论体重波动与“最佳版本”自我的关系;提及已故亲人数字形象的心理健康研究。

07

物理与数字融合的未来愿景

56:00
  • 未来物理空间中全息图可能与实体物品一样常见,游戏、屏幕、家具都可被全息替代。
  • 真正的“现实世界”将是物理世界与数字世界的有机结合,而非二选一。
  • 下一代计算平台将支持移动和交互,摆脱静态屏幕限制,更符合人类身体天性。
深读这一段

讨论的问题:物理与数字融合将如何重新定义“现实世界”?

论据 / 案例:扎克伯格举例客厅乒乓球桌可瞬间全息生成或消失;强调人类体验本质上是物理的,未来计算需支持移动和交互。

08

内容策略与自由边界

64:00
  • 数字环境中的伤害定义不同于物理世界,例如游戏中的“射击”被视为娱乐。
  • 平台需制定内容政策,平衡创作自由与防止权利侵害。
  • 早期阶段的大型用户交互有助于学习系统行为,为AGI发展积累经验。
深读这一段

讨论的问题:元宇宙中的内容自由与行为规范应如何界定?

论据 / 案例:扎克伯格对比游戏中“射击”与物理现实的差异;提到内容政策的存在;强调大规模交互对AI学习的价值。

金句

  • "I think it's the future of how human beings connect to each other in a deeply meaningful way on the Internet." ——我认为这是人类在互联网上进行深度有意义连接的未来。
  • "The real world is this combination of a physical world and the presence that we feel, but also being able to combine that with this increasingly rich and powerful and capable digital world that we have." ——真实世界是物理世界与我们所感受到的‘在场感’的结合,同时还能与我们这个日益丰富、强大和功能齐全的数字世界相融合。
  • "I think there's a question about how you want to tune that... some people might prefer a version of themselves that's more emotive in their avatar than their actual faces." ——我认为这涉及到一个调节问题……有些人可能更希望他们的虚拟形象比真实的自己更富有表情。
  • "We want the world to evolve in a way where there isn't like a single AI super intelligence, but where a lot of people are empowered by having AI tools to do their jobs and to make their lives better." ——我们希望世界演进的方式不是出现一个单一的超级人工智能,而是让很多人通过拥有AI工具来完成工作、让生活变得更美好。

原文链接

查看完整访谈

完整内容见原文:Lex Fridman Podcast · 扎克伯格:Codec Avatars是元宇宙的临门一脚