跳到内容
九天共学
学习资料
课程笔记 · 13 页

从世界模型到世界智能体 · 斯坦福课程笔记

看视频
配套视频 · 心晴九天

从世界模型到世界智能体 · 斯坦福讲座

在小红书打开

如果 App 打开了首页,复制搜索词后在小红书搜索。

也可以长按视频名称复制。
下载 PDF
9 / 13

第 9 页 · 文字版

心晴九天 · 课程笔记 从世界模型到世界智能体

可控性 团队做过的控制方式:镜头控制(CameraCtrl 1/2)、用追踪到的手与生成世界中的物体互动(比如摸 狗)、时空独立控制,也就是《黑客帝国》式的子弹时间,时间停住、镜头绕行。讲者提到,这些功能 已经出现在 World Labs 等商用系统里。 30:30–33:30

难题三:越画越歪(漂移) 自回归一直生成下去,动作变怪、颜色过饱和、物体变形。原因是训练时上下文都是干净的真实帧,推 理时上下文是模型自己生成的、越来越差的帧,分布不一致,误差累积,即曝光偏差。 33:10–34:20

原课幻灯片:DAgger,用专家示范帮助从偏离中恢复。问题是:视频生成里,专家示范从哪来? BAgger(Backwards Aggregation):让模型自己生成到出现退化,再把这段视频倒放,配上"这段是倒 放"的文字提示(避免学到鱼倒着游这类不合理动作),就得到了从坏变好的纠正示范。多轮后训练后, 模型学会自我纠正。对比:History Guidance 仍有明显颜色饱和;Self Forcing 画面好看但动作僵硬; BAgger 兼顾画面和动作。 34:50–36:20

PART 5

五 从世界模型到世界智能体 驱动机器人的是策略:从观察到动作的映射,闭合感知—动作循环。讲者比较了三条训练路线: 37:00– 39:00

路线 优点 问题 传统模拟器 数据几乎免费、无限 仿真和现实的差距,数据多样性永远比不上真实世界

斯坦福 CS292 / EE292R · Gordon Wetzstein · 2026.09.30 9 / 13

文字版便于检索与复制,图表和排版请切回「图文」。

答疑由心晴确认后回复
资料说明与出处

2026 年 9 月 30 日讲座的个人学习笔记,保留原课署名与整理边界。

心晴九天整理 · 原资料版本:2026-09-30

配套讲解:从世界模型到世界智能体 · 斯坦福讲座
配套视频 · 心晴九天

从世界模型到世界智能体 · 斯坦福讲座

在小红书打开

如果 App 打开了首页,复制搜索词后在小红书搜索。

也可以长按视频名称复制。

保留原作者署名、来源与原文件版本。本次仅整理阅读入口,未把旧资料的数字、产品或政策状态重新核验为当前事实。

配套练习与阅读提示
  • 按目录阅读这份原版资料
  • 结合配套笔记理解图示、例子和使用边界

选一个与你手头任务有关的段落,先写自己的判断;资料中的提示词仅供本人决定是否使用。

使用统计:关闭

帮助心晴了解哪些内容有用。默认关闭;不记录问题正文、私人笔记、手机号或聊天内容。

允许关联后,登录账号的页面与操作可由运营查看。已启用浏览器“不跟踪”时不采集。明细最多保留 90 天,后台读取或每日首次采集时清理。