


【青春华章·长征路上山河新】“红色草药”守护将士长征路-8593d705
发布Atlas后,李飞飞最新访谈:如何预测一个未被拍下的世界 只用 3 部固定在三脚架上的 iPhone,Atlas 就能重现《黑客帝国》式的“子弹时间”,让镜头绕着凝固的动作移动。 这是 World Labs 最新发布的世界模型 Atlas 展示的能力之一。据 DeepTech 此前报道,这是全球首个多模态世界模型。它能以像素级精度控制镜头,根据参考图生成最长 1 分钟、最高 1,440p 的视频,还可用 1 张至数十张图像重建真实空间,输出新视角画面和显式 3D 结果。 近日,World Labs 联合创始人李飞飞、Justin Johnson 和 Ben Mildenhall 做客 a16z Show,与主持人 Martin Casado 讨论 Atlas。谈话从设计选择展开,也回顾了团队由多模态世界模型 Marble 转向 Atlas 的过程。 对谈中,团队将 Atlas 的核心能力称为“新视角预测”。区别于一般视频模型沿时间轴预测下一帧,Atlas 能够根据已有画面与相机位姿等,判断镜头移动到另一个时空位置后会看到什么。 李飞飞认为,生成具有空间语境和现实依据的像素,是通往空间智能的一步。这种能力既能帮助创作者维持场景与物体的一致性,也可能把现实环境转成机器人训练所需的模拟空间。 谈及后续路线,团队计划增强模型对动态变化和场景编辑的支持,并探索与机器人行动规划的结合,使其从呈现三维世界逐步走向理解和参与其中。 对谈从 Atlas 如何生成、重建和模拟世界出发。据 World Labs 团队介绍,Atlas 在预训练阶段共同处理文本、图像、视频、相机位姿和 3D 信息,并将其编码为“空间上下文”。每张图像都关联着三维相机位姿,位置和朝向得到明确标记。 除了相机参数,Atlas 还把深度图作为原生输入。RGB 图像记录某个位置看上去是什么样,深度图则描述物体与相机之间的距离,帮助模型判断前后遮挡和空间结构。换句话说,模型处理的不只是连续画面,还包括画面背后的三维关系。 李飞飞提到,计算机视觉发展半个多世纪以来,像素生成、识别和三维重建通常分属不同研究方向。Atlas 以视点和相机位姿估计为锚点,把像素生成与像素重建放进同一个模型,使两类任务可以在一套架构中相互配合。 在她看来,空间智能最终需要支持生成、推理、编辑和交互,而理解空间的几何、结构与物理规律是实现这些任务的基础。Atlas 可以估计每一帧对应的视角和相机位姿,使生成的像素受到空间语境和几何关系约束,因而构成了这条路径上的一个阶段。 针对 Marble 与 Atlas 的差异,联合创始人 Justin Johnson 解释,为便于在移动设备和游戏引擎中渲染,上一代多模态世界模型 Marble 主要以高斯泼溅表示三维场景。但由于模型的所有结果都须先落到这一种表示上,从而限制了其他输出。 针对这一问题,Atlas 进行了一些调整,即将不同模态更早分开,把“新视角预测”放在更基础的位置。模型先根据空间上下文生成指定视角的 RGB 画面或深度信息,需要明确的三维表示时,再生成高斯泼溅场景。换句话说,高斯泼溅不再是所有任务都必须经过的终点,而成为模型可按任务调用的一种输出形式。 图|Atlas 统一生成与空间重建(来源:World Labs官网) 此外,Atlas 还试图降低三维重建对密集拍摄的依赖。Ben Mildenhall 表示,传统方法需要让每处表面至少出现在 3 至 4 个视角中,拍摄一个房间可能需要 100 至 300 张照片。Atlas 有望将数量降到约 3 张,相当于减少 50 至 100 倍。 输入数量大幅减少后,模型要面对的考验是如何补足相机从未拍到的区域。李飞飞提到,在斯坦福校园的一次演示中,模型接收的 3 至 25 张照片全部从地面拍摄,却生成了校园上空的俯瞰画面。她指出,空中视角并非来自原始素材,而是在已知空间关系约束下生成的结果。 这一案例也再次说明了两类任务为何需要相互配合。尽管密集重建可以利用大量拍摄素材还原已被镜头捕捉到的区域,但难免会遗漏桌底、麦克风下方和椅腿之间等区域,Atlas 则能够“看到”这些细节。 在谈及团队如何确认这一技术路径时,李飞飞回忆道,2026 年初夏,一个小于当前版本的模型处理 NeRF 论文中的花园桌场景后,给出了此前未曾见过的桌下视角,出现了一只足球。 正是这次对新视角预测能力的关键验证,三位创始人决定继续推进这一方向。此后,模型随着规模、训练时长和芯片数量增加而持续改善。 新视角预测已经回答了模型如何建立连贯空间,但若想让这个空间能够被创作者反复修改或用于设计,接下来的问题便是如何让它成为真实工作流程的一部分。 在前代模型 Marble 的使用中,创作者常先生成三维场景,再从不同位置截取画面,作为后续视频制作的素材。Atlas 希望把这一过程收进同一空间,让用户直接指定视角并继续生成所需镜头。这样一来,场景中的人物、道具和位置关系可以延续到下一步创作。 这种连续性也正是专业工作流所需要的,例如影视、游戏和营销项目要保留场景与布局以便修改,建筑、施工和展台制作也要把口头意见和草图落实到三维软件中。 Ben Mildenhall 表示,希望模型降低反复修改的负担,保留控制精度的同时使三维设计更接近搭积木或用铅笔勾画。 当场景可以从现实素材中被重建和修改,李飞飞又将它放入机器人研发的工作链。2026 年 7 月,World Labs 收购机器人公司 SceniX,补上了从现实环境重建、到模拟训练、再回到现实部署的技术链。 通过 Atlas 对真实场景进行重建并生成可调整的模拟环境,开发者可以在其中采集训练数据、训练机器人策略,并在部署前评估不同动作可能带来的结果。 李飞飞认为,机器人当前的主要瓶颈是数据。线缆弯曲方式、容器尺寸和颜色、物体摆放位置都可能变化,训练环境需要呈现这些差异,机器人才有机会应对部署时的不同情况。Atlas 可以将真实环境更快转入模拟,再改变其中的条件,补充难以逐一采集的训练情形。 图|Atlas 生成机器人模拟视角(来源:World Labs 官网) 不过,要训练机器人策略,模拟环境不能只停留在静态画面的复现。当机器人策略采取动作,环境还可能以意料之外的方式响应,训练就需要覆盖尽可能多的异常与失败情形。 Justin Johnson 表示,除人工编写规则的传统物理引擎外,团队还在探索“神经模拟器”,让模型从数据中学习环境面对不同动作时可能发生的变化。 此外,真实世界始终处于变化之中,模型还需要处理时间维度。针对 Atlas 动态能力,World Labs 团队表示,模型架构和预训练数据本已包含动态信息。不过,当前版本的后训练主要聚焦静态场景和空间移动,团队计划在后续版本中继续增强对时间变化的处理。 谈及未来规划,李飞飞认为,空间智能需要超越看见和解释场景,形成感知、体验与交互的闭环。她将其视为从空间生成迈向更高保真模拟、场景编辑和行动规划的方向,使模型进一步支持人和机器在空间中行动。 1.https://www.youtube.com/watch?v=qn1QDDBnTA0 2.https://www.worldlabs.ai/blog/atlas#spatial-reconstruction 3.https://www.worldlabs.ai/blog/atlas#robotics-simulation 特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。 Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services. 界面新闻 2026-09-07 20:15:59 上观新闻 2026-09-08 09:04:25 鲁中晨报 2026-09-05 17:14:04 扬子晚报 2026-09-08 07:20:10 南方都市报 2026-09-08 10:51:28 南方都市报 2026-09-06 15:29:22 鲁中晨报 2026-09-06 15:47:03 上观新闻 2026-09-07 14:45:34 澎湃新闻 2026-09-07 22:05:05 新京报 2026-09-08 08:06:25 看看新闻Knews 2026-09-07 23:08:28 海峡导报社 2026-09-08 09:54:27 南方都市报 2026-09-07 14:44:06 第一财经资讯 2026-09-07 13:22:17 鲁中晨报 2026-09-08 07:03:22 新京报政事儿 2026-09-08 11:06:13 南方都市报 2026-09-06 11:41:02 新民晚报 2026-09-08 09:46:35 澎湃新闻 2026-09-08 10:36:13 人民资讯 2026-09-07 21:04:04 证券时报 2026-09-08 12:54:30 励职派 2026-09-08 12:56:15
交通银行“农垦交e贷”助力北大荒农业生产资金周转提速-rssai9bad9a1a5f7b466b
发布Atlas后,李飞飞最新访谈:如何预测一个未被拍下的世界 只用 3 部固定在三脚架上的 iPhone,Atlas 就能重现《黑客帝国》式的“子弹时间”,让镜头绕着凝固的动作移动。 这是 World Labs 最新发布的世界模型 Atlas 展示的能力之一。据 DeepTech 此前报道,这是全球首个多模态世界模型。它能以像素级精度控制镜头,根据参考图生成最长 1 分钟、最高 1,440p 的视频,还可用 1 张至数十张图像重建真实空间,输出新视角画面和显式 3D 结果。 近日,World Labs 联合创始人李飞飞、Justin Johnson 和 Ben Mildenhall 做客 a16z Show,与主持人 Martin Casado 讨论 Atlas。谈话从设计选择展开,也回顾了团队由多模态世界模型 Marble 转向 Atlas 的过程。 对谈中,团队将 Atlas 的核心能力称为“新视角预测”。区别于一般视频模型沿时间轴预测下一帧,Atlas 能够根据已有画面与相机位姿等,判断镜头移动到另一个时空位置后会看到什么。 李飞飞认为,生成具有空间语境和现实依据的像素,是通往空间智能的一步。这种能力既能帮助创作者维持场景与物体的一致性,也可能把现实环境转成机器人训练所需的模拟空间。 谈及后续路线,团队计划增强模型对动态变化和场景编辑的支持,并探索与机器人行动规划的结合,使其从呈现三维世界逐步走向理解和参与其中。 对谈从 Atlas 如何生成、重建和模拟世界出发。据 World Labs 团队介绍,Atlas 在预训练阶段共同处理文本、图像、视频、相机位姿和 3D 信息,并将其编码为“空间上下文”。每张图像都关联着三维相机位姿,位置和朝向得到明确标记。 除了相机参数,Atlas 还把深度图作为原生输入。RGB 图像记录某个位置看上去是什么样,深度图则描述物体与相机之间的距离,帮助模型判断前后遮挡和空间结构。换句话说,模型处理的不只是连续画面,还包括画面背后的三维关系。 李飞飞提到,计算机视觉发展半个多世纪以来,像素生成、识别和三维重建通常分属不同研究方向。Atlas 以视点和相机位姿估计为锚点,把像素生成与像素重建放进同一个模型,使两类任务可以在一套架构中相互配合。 在她看来,空间智能最终需要支持生成、推理、编辑和交互,而理解空间的几何、结构与物理规律是实现这些任务的基础。Atlas 可以估计每一帧对应的视角和相机位姿,使生成的像素受到空间语境和几何关系约束,因而构成了这条路径上的一个阶段。 针对 Marble 与 Atlas 的差异,联合创始人 Justin Johnson 解释,为便于在移动设备和游戏引擎中渲染,上一代多模态世界模型 Marble 主要以高斯泼溅表示三维场景。但由于模型的所有结果都须先落到这一种表示上,从而限制了其他输出。 针对这一问题,Atlas 进行了一些调整,即将不同模态更早分开,把“新视角预测”放在更基础的位置。模型先根据空间上下文生成指定视角的 RGB 画面或深度信息,需要明确的三维表示时,再生成高斯泼溅场景。换句话说,高斯泼溅不再是所有任务都必须经过的终点,而成为模型可按任务调用的一种输出形式。 图|Atlas 统一生成与空间重建(来源:World Labs官网) 此外,Atlas 还试图降低三维重建对密集拍摄的依赖。Ben Mildenhall 表示,传统方法需要让每处表面至少出现在 3 至 4 个视角中,拍摄一个房间可能需要 100 至 300 张照片。Atlas 有望将数量降到约 3 张,相当于减少 50 至 100 倍。 输入数量大幅减少后,模型要面对的考验是如何补足相机从未拍到的区域。李飞飞提到,在斯坦福校园的一次演示中,模型接收的 3 至 25 张照片全部从地面拍摄,却生成了校园上空的俯瞰画面。她指出,空中视角并非来自原始素材,而是在已知空间关系约束下生成的结果。 这一案例也再次说明了两类任务为何需要相互配合。尽管密集重建可以利用大量拍摄素材还原已被镜头捕捉到的区域,但难免会遗漏桌底、麦克风下方和椅腿之间等区域,Atlas 则能够“看到”这些细节。 在谈及团队如何确认这一技术路径时,李飞飞回忆道,2026 年初夏,一个小于当前版本的模型处理 NeRF 论文中的花园桌场景后,给出了此前未曾见过的桌下视角,出现了一只足球。 正是这次对新视角预测能力的关键验证,三位创始人决定继续推进这一方向。此后,模型随着规模、训练时长和芯片数量增加而持续改善。 新视角预测已经回答了模型如何建立连贯空间,但若想让这个空间能够被创作者反复修改或用于设计,接下来的问题便是如何让它成为真实工作流程的一部分。 在前代模型 Marble 的使用中,创作者常先生成三维场景,再从不同位置截取画面,作为后续视频制作的素材。Atlas 希望把这一过程收进同一空间,让用户直接指定视角并继续生成所需镜头。这样一来,场景中的人物、道具和位置关系可以延续到下一步创作。 这种连续性也正是专业工作流所需要的,例如影视、游戏和营销项目要保留场景与布局以便修改,建筑、施工和展台制作也要把口头意见和草图落实到三维软件中。 Ben Mildenhall 表示,希望模型降低反复修改的负担,保留控制精度的同时使三维设计更接近搭积木或用铅笔勾画。 当场景可以从现实素材中被重建和修改,李飞飞又将它放入机器人研发的工作链。2026 年 7 月,World Labs 收购机器人公司 SceniX,补上了从现实环境重建、到模拟训练、再回到现实部署的技术链。 通过 Atlas 对真实场景进行重建并生成可调整的模拟环境,开发者可以在其中采集训练数据、训练机器人策略,并在部署前评估不同动作可能带来的结果。 李飞飞认为,机器人当前的主要瓶颈是数据。线缆弯曲方式、容器尺寸和颜色、物体摆放位置都可能变化,训练环境需要呈现这些差异,机器人才有机会应对部署时的不同情况。Atlas 可以将真实环境更快转入模拟,再改变其中的条件,补充难以逐一采集的训练情形。 图|Atlas 生成机器人模拟视角(来源:World Labs 官网) 不过,要训练机器人策略,模拟环境不能只停留在静态画面的复现。当机器人策略采取动作,环境还可能以意料之外的方式响应,训练就需要覆盖尽可能多的异常与失败情形。 Justin Johnson 表示,除人工编写规则的传统物理引擎外,团队还在探索“神经模拟器”,让模型从数据中学习环境面对不同动作时可能发生的变化。 此外,真实世界始终处于变化之中,模型还需要处理时间维度。针对 Atlas 动态能力,World Labs 团队表示,模型架构和预训练数据本已包含动态信息。不过,当前版本的后训练主要聚焦静态场景和空间移动,团队计划在后续版本中继续增强对时间变化的处理。 谈及未来规划,李飞飞认为,空间智能需要超越看见和解释场景,形成感知、体验与交互的闭环。她将其视为从空间生成迈向更高保真模拟、场景编辑和行动规划的方向,使模型进一步支持人和机器在空间中行动。 1.https://www.youtube.com/watch?v=qn1QDDBnTA0 2.https://www.worldlabs.ai/blog/atlas#spatial-reconstruction 3.https://www.worldlabs.ai/blog/atlas#robotics-simulation 特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。 Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services. 界面新闻 2026-09-07 20:15:59 上观新闻 2026-09-08 09:04:25 鲁中晨报 2026-09-05 17:14:04 扬子晚报 2026-09-08 07:20:10 南方都市报 2026-09-08 10:51:28 南方都市报 2026-09-06 15:29:22 鲁中晨报 2026-09-06 15:47:03 上观新闻 2026-09-07 14:45:34 澎湃新闻 2026-09-07 22:05:05 新京报 2026-09-08 08:06:25 看看新闻Knews 2026-09-07 23:08:28 海峡导报社 2026-09-08 09:54:27 南方都市报 2026-09-07 14:44:06 第一财经资讯 2026-09-07 13:22:17 鲁中晨报 2026-09-08 07:03:22 新京报政事儿 2026-09-08 11:06:13 南方都市报 2026-09-06 11:41:02 新民晚报 2026-09-08 09:46:35 澎湃新闻 2026-09-08 10:36:13 人民资讯 2026-09-07 21:04:04 证券时报 2026-09-08 12:54:30 励职派 2026-09-08 12:56:15
芭堤雅如此迎接“林肯”号“休息与娱乐”?-f78e4fda
发布Atlas后,李飞飞最新访谈:如何预测一个未被拍下的世界 只用 3 部固定在三脚架上的 iPhone,Atlas 就能重现《黑客帝国》式的“子弹时间”,让镜头绕着凝固的动作移动。 这是 World Labs 最新发布的世界模型 Atlas 展示的能力之一。据 DeepTech 此前报道,这是全球首个多模态世界模型。它能以像素级精度控制镜头,根据参考图生成最长 1 分钟、最高 1,440p 的视频,还可用 1 张至数十张图像重建真实空间,输出新视角画面和显式 3D 结果。 近日,World Labs 联合创始人李飞飞、Justin Johnson 和 Ben Mildenhall 做客 a16z Show,与主持人 Martin Casado 讨论 Atlas。谈话从设计选择展开,也回顾了团队由多模态世界模型 Marble 转向 Atlas 的过程。 对谈中,团队将 Atlas 的核心能力称为“新视角预测”。区别于一般视频模型沿时间轴预测下一帧,Atlas 能够根据已有画面与相机位姿等,判断镜头移动到另一个时空位置后会看到什么。 李飞飞认为,生成具有空间语境和现实依据的像素,是通往空间智能的一步。这种能力既能帮助创作者维持场景与物体的一致性,也可能把现实环境转成机器人训练所需的模拟空间。 谈及后续路线,团队计划增强模型对动态变化和场景编辑的支持,并探索与机器人行动规划的结合,使其从呈现三维世界逐步走向理解和参与其中。 对谈从 Atlas 如何生成、重建和模拟世界出发。据 World Labs 团队介绍,Atlas 在预训练阶段共同处理文本、图像、视频、相机位姿和 3D 信息,并将其编码为“空间上下文”。每张图像都关联着三维相机位姿,位置和朝向得到明确标记。 除了相机参数,Atlas 还把深度图作为原生输入。RGB 图像记录某个位置看上去是什么样,深度图则描述物体与相机之间的距离,帮助模型判断前后遮挡和空间结构。换句话说,模型处理的不只是连续画面,还包括画面背后的三维关系。 李飞飞提到,计算机视觉发展半个多世纪以来,像素生成、识别和三维重建通常分属不同研究方向。Atlas 以视点和相机位姿估计为锚点,把像素生成与像素重建放进同一个模型,使两类任务可以在一套架构中相互配合。 在她看来,空间智能最终需要支持生成、推理、编辑和交互,而理解空间的几何、结构与物理规律是实现这些任务的基础。Atlas 可以估计每一帧对应的视角和相机位姿,使生成的像素受到空间语境和几何关系约束,因而构成了这条路径上的一个阶段。 针对 Marble 与 Atlas 的差异,联合创始人 Justin Johnson 解释,为便于在移动设备和游戏引擎中渲染,上一代多模态世界模型 Marble 主要以高斯泼溅表示三维场景。但由于模型的所有结果都须先落到这一种表示上,从而限制了其他输出。 针对这一问题,Atlas 进行了一些调整,即将不同模态更早分开,把“新视角预测”放在更基础的位置。模型先根据空间上下文生成指定视角的 RGB 画面或深度信息,需要明确的三维表示时,再生成高斯泼溅场景。换句话说,高斯泼溅不再是所有任务都必须经过的终点,而成为模型可按任务调用的一种输出形式。 图|Atlas 统一生成与空间重建(来源:World Labs官网) 此外,Atlas 还试图降低三维重建对密集拍摄的依赖。Ben Mildenhall 表示,传统方法需要让每处表面至少出现在 3 至 4 个视角中,拍摄一个房间可能需要 100 至 300 张照片。Atlas 有望将数量降到约 3 张,相当于减少 50 至 100 倍。 输入数量大幅减少后,模型要面对的考验是如何补足相机从未拍到的区域。李飞飞提到,在斯坦福校园的一次演示中,模型接收的 3 至 25 张照片全部从地面拍摄,却生成了校园上空的俯瞰画面。她指出,空中视角并非来自原始素材,而是在已知空间关系约束下生成的结果。 这一案例也再次说明了两类任务为何需要相互配合。尽管密集重建可以利用大量拍摄素材还原已被镜头捕捉到的区域,但难免会遗漏桌底、麦克风下方和椅腿之间等区域,Atlas 则能够“看到”这些细节。 在谈及团队如何确认这一技术路径时,李飞飞回忆道,2026 年初夏,一个小于当前版本的模型处理 NeRF 论文中的花园桌场景后,给出了此前未曾见过的桌下视角,出现了一只足球。 正是这次对新视角预测能力的关键验证,三位创始人决定继续推进这一方向。此后,模型随着规模、训练时长和芯片数量增加而持续改善。 新视角预测已经回答了模型如何建立连贯空间,但若想让这个空间能够被创作者反复修改或用于设计,接下来的问题便是如何让它成为真实工作流程的一部分。 在前代模型 Marble 的使用中,创作者常先生成三维场景,再从不同位置截取画面,作为后续视频制作的素材。Atlas 希望把这一过程收进同一空间,让用户直接指定视角并继续生成所需镜头。这样一来,场景中的人物、道具和位置关系可以延续到下一步创作。 这种连续性也正是专业工作流所需要的,例如影视、游戏和营销项目要保留场景与布局以便修改,建筑、施工和展台制作也要把口头意见和草图落实到三维软件中。 Ben Mildenhall 表示,希望模型降低反复修改的负担,保留控制精度的同时使三维设计更接近搭积木或用铅笔勾画。 当场景可以从现实素材中被重建和修改,李飞飞又将它放入机器人研发的工作链。2026 年 7 月,World Labs 收购机器人公司 SceniX,补上了从现实环境重建、到模拟训练、再回到现实部署的技术链。 通过 Atlas 对真实场景进行重建并生成可调整的模拟环境,开发者可以在其中采集训练数据、训练机器人策略,并在部署前评估不同动作可能带来的结果。 李飞飞认为,机器人当前的主要瓶颈是数据。线缆弯曲方式、容器尺寸和颜色、物体摆放位置都可能变化,训练环境需要呈现这些差异,机器人才有机会应对部署时的不同情况。Atlas 可以将真实环境更快转入模拟,再改变其中的条件,补充难以逐一采集的训练情形。 图|Atlas 生成机器人模拟视角(来源:World Labs 官网) 不过,要训练机器人策略,模拟环境不能只停留在静态画面的复现。当机器人策略采取动作,环境还可能以意料之外的方式响应,训练就需要覆盖尽可能多的异常与失败情形。 Justin Johnson 表示,除人工编写规则的传统物理引擎外,团队还在探索“神经模拟器”,让模型从数据中学习环境面对不同动作时可能发生的变化。 此外,真实世界始终处于变化之中,模型还需要处理时间维度。针对 Atlas 动态能力,World Labs 团队表示,模型架构和预训练数据本已包含动态信息。不过,当前版本的后训练主要聚焦静态场景和空间移动,团队计划在后续版本中继续增强对时间变化的处理。 谈及未来规划,李飞飞认为,空间智能需要超越看见和解释场景,形成感知、体验与交互的闭环。她将其视为从空间生成迈向更高保真模拟、场景编辑和行动规划的方向,使模型进一步支持人和机器在空间中行动。 1.https://www.youtube.com/watch?v=qn1QDDBnTA0 2.https://www.worldlabs.ai/blog/atlas#spatial-reconstruction 3.https://www.worldlabs.ai/blog/atlas#robotics-simulation 特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。 Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services. 界面新闻 2026-09-07 20:15:59 上观新闻 2026-09-08 09:04:25 鲁中晨报 2026-09-05 17:14:04 扬子晚报 2026-09-08 07:20:10 南方都市报 2026-09-08 10:51:28 南方都市报 2026-09-06 15:29:22 鲁中晨报 2026-09-06 15:47:03 上观新闻 2026-09-07 14:45:34 澎湃新闻 2026-09-07 22:05:05 新京报 2026-09-08 08:06:25 看看新闻Knews 2026-09-07 23:08:28 海峡导报社 2026-09-08 09:54:27 南方都市报 2026-09-07 14:44:06 第一财经资讯 2026-09-07 13:22:17 鲁中晨报 2026-09-08 07:03:22 新京报政事儿 2026-09-08 11:06:13 南方都市报 2026-09-06 11:41:02 新民晚报 2026-09-08 09:46:35 澎湃新闻 2026-09-08 10:36:13 人民资讯 2026-09-07 21:04:04 证券时报 2026-09-08 12:54:30 励职派 2026-09-08 12:56:15
一场大赛后,这位社区书记把“标准答案”写进百姓日常-830fc922
发布Atlas后,李飞飞最新访谈:如何预测一个未被拍下的世界 只用 3 部固定在三脚架上的 iPhone,Atlas 就能重现《黑客帝国》式的“子弹时间”,让镜头绕着凝固的动作移动。 这是 World Labs 最新发布的世界模型 Atlas 展示的能力之一。据 DeepTech 此前报道,这是全球首个多模态世界模型。它能以像素级精度控制镜头,根据参考图生成最长 1 分钟、最高 1,440p 的视频,还可用 1 张至数十张图像重建真实空间,输出新视角画面和显式 3D 结果。 近日,World Labs 联合创始人李飞飞、Justin Johnson 和 Ben Mildenhall 做客 a16z Show,与主持人 Martin Casado 讨论 Atlas。谈话从设计选择展开,也回顾了团队由多模态世界模型 Marble 转向 Atlas 的过程。 对谈中,团队将 Atlas 的核心能力称为“新视角预测”。区别于一般视频模型沿时间轴预测下一帧,Atlas 能够根据已有画面与相机位姿等,判断镜头移动到另一个时空位置后会看到什么。 李飞飞认为,生成具有空间语境和现实依据的像素,是通往空间智能的一步。这种能力既能帮助创作者维持场景与物体的一致性,也可能把现实环境转成机器人训练所需的模拟空间。 谈及后续路线,团队计划增强模型对动态变化和场景编辑的支持,并探索与机器人行动规划的结合,使其从呈现三维世界逐步走向理解和参与其中。 对谈从 Atlas 如何生成、重建和模拟世界出发。据 World Labs 团队介绍,Atlas 在预训练阶段共同处理文本、图像、视频、相机位姿和 3D 信息,并将其编码为“空间上下文”。每张图像都关联着三维相机位姿,位置和朝向得到明确标记。 除了相机参数,Atlas 还把深度图作为原生输入。RGB 图像记录某个位置看上去是什么样,深度图则描述物体与相机之间的距离,帮助模型判断前后遮挡和空间结构。换句话说,模型处理的不只是连续画面,还包括画面背后的三维关系。 李飞飞提到,计算机视觉发展半个多世纪以来,像素生成、识别和三维重建通常分属不同研究方向。Atlas 以视点和相机位姿估计为锚点,把像素生成与像素重建放进同一个模型,使两类任务可以在一套架构中相互配合。 在她看来,空间智能最终需要支持生成、推理、编辑和交互,而理解空间的几何、结构与物理规律是实现这些任务的基础。Atlas 可以估计每一帧对应的视角和相机位姿,使生成的像素受到空间语境和几何关系约束,因而构成了这条路径上的一个阶段。 针对 Marble 与 Atlas 的差异,联合创始人 Justin Johnson 解释,为便于在移动设备和游戏引擎中渲染,上一代多模态世界模型 Marble 主要以高斯泼溅表示三维场景。但由于模型的所有结果都须先落到这一种表示上,从而限制了其他输出。 针对这一问题,Atlas 进行了一些调整,即将不同模态更早分开,把“新视角预测”放在更基础的位置。模型先根据空间上下文生成指定视角的 RGB 画面或深度信息,需要明确的三维表示时,再生成高斯泼溅场景。换句话说,高斯泼溅不再是所有任务都必须经过的终点,而成为模型可按任务调用的一种输出形式。 图|Atlas 统一生成与空间重建(来源:World Labs官网) 此外,Atlas 还试图降低三维重建对密集拍摄的依赖。Ben Mildenhall 表示,传统方法需要让每处表面至少出现在 3 至 4 个视角中,拍摄一个房间可能需要 100 至 300 张照片。Atlas 有望将数量降到约 3 张,相当于减少 50 至 100 倍。 输入数量大幅减少后,模型要面对的考验是如何补足相机从未拍到的区域。李飞飞提到,在斯坦福校园的一次演示中,模型接收的 3 至 25 张照片全部从地面拍摄,却生成了校园上空的俯瞰画面。她指出,空中视角并非来自原始素材,而是在已知空间关系约束下生成的结果。 这一案例也再次说明了两类任务为何需要相互配合。尽管密集重建可以利用大量拍摄素材还原已被镜头捕捉到的区域,但难免会遗漏桌底、麦克风下方和椅腿之间等区域,Atlas 则能够“看到”这些细节。 在谈及团队如何确认这一技术路径时,李飞飞回忆道,2026 年初夏,一个小于当前版本的模型处理 NeRF 论文中的花园桌场景后,给出了此前未曾见过的桌下视角,出现了一只足球。 正是这次对新视角预测能力的关键验证,三位创始人决定继续推进这一方向。此后,模型随着规模、训练时长和芯片数量增加而持续改善。 新视角预测已经回答了模型如何建立连贯空间,但若想让这个空间能够被创作者反复修改或用于设计,接下来的问题便是如何让它成为真实工作流程的一部分。 在前代模型 Marble 的使用中,创作者常先生成三维场景,再从不同位置截取画面,作为后续视频制作的素材。Atlas 希望把这一过程收进同一空间,让用户直接指定视角并继续生成所需镜头。这样一来,场景中的人物、道具和位置关系可以延续到下一步创作。 这种连续性也正是专业工作流所需要的,例如影视、游戏和营销项目要保留场景与布局以便修改,建筑、施工和展台制作也要把口头意见和草图落实到三维软件中。 Ben Mildenhall 表示,希望模型降低反复修改的负担,保留控制精度的同时使三维设计更接近搭积木或用铅笔勾画。 当场景可以从现实素材中被重建和修改,李飞飞又将它放入机器人研发的工作链。2026 年 7 月,World Labs 收购机器人公司 SceniX,补上了从现实环境重建、到模拟训练、再回到现实部署的技术链。 通过 Atlas 对真实场景进行重建并生成可调整的模拟环境,开发者可以在其中采集训练数据、训练机器人策略,并在部署前评估不同动作可能带来的结果。 李飞飞认为,机器人当前的主要瓶颈是数据。线缆弯曲方式、容器尺寸和颜色、物体摆放位置都可能变化,训练环境需要呈现这些差异,机器人才有机会应对部署时的不同情况。Atlas 可以将真实环境更快转入模拟,再改变其中的条件,补充难以逐一采集的训练情形。 图|Atlas 生成机器人模拟视角(来源:World Labs 官网) 不过,要训练机器人策略,模拟环境不能只停留在静态画面的复现。当机器人策略采取动作,环境还可能以意料之外的方式响应,训练就需要覆盖尽可能多的异常与失败情形。 Justin Johnson 表示,除人工编写规则的传统物理引擎外,团队还在探索“神经模拟器”,让模型从数据中学习环境面对不同动作时可能发生的变化。 此外,真实世界始终处于变化之中,模型还需要处理时间维度。针对 Atlas 动态能力,World Labs 团队表示,模型架构和预训练数据本已包含动态信息。不过,当前版本的后训练主要聚焦静态场景和空间移动,团队计划在后续版本中继续增强对时间变化的处理。 谈及未来规划,李飞飞认为,空间智能需要超越看见和解释场景,形成感知、体验与交互的闭环。她将其视为从空间生成迈向更高保真模拟、场景编辑和行动规划的方向,使模型进一步支持人和机器在空间中行动。 1.https://www.youtube.com/watch?v=qn1QDDBnTA0 2.https://www.worldlabs.ai/blog/atlas#spatial-reconstruction 3.https://www.worldlabs.ai/blog/atlas#robotics-simulation 特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。 Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services. 界面新闻 2026-09-07 20:15:59 上观新闻 2026-09-08 09:04:25 鲁中晨报 2026-09-05 17:14:04 扬子晚报 2026-09-08 07:20:10 南方都市报 2026-09-08 10:51:28 南方都市报 2026-09-06 15:29:22 鲁中晨报 2026-09-06 15:47:03 上观新闻 2026-09-07 14:45:34 澎湃新闻 2026-09-07 22:05:05 新京报 2026-09-08 08:06:25 看看新闻Knews 2026-09-07 23:08:28 海峡导报社 2026-09-08 09:54:27 南方都市报 2026-09-07 14:44:06 第一财经资讯 2026-09-07 13:22:17 鲁中晨报 2026-09-08 07:03:22 新京报政事儿 2026-09-08 11:06:13 南方都市报 2026-09-06 11:41:02 新民晚报 2026-09-08 09:46:35 澎湃新闻 2026-09-08 10:36:13 人民资讯 2026-09-07 21:04:04 证券时报 2026-09-08 12:54:30 励职派 2026-09-08 12:56:15
转载请注明出处
本文的链接地址:http://www.teycb.com/ArTicle/details/60231594.sHtML
本文最后 发布于2026-09-09 18:12:19,已经过了0天没有更新,若内容或图片 失效,请留言反馈
推荐阅读
- 伊朗和韩国杠上了,怒怼“你敢出兵试试”!这俩国家还有70亿美元的“旧恨”-5b35ebb0
- 中国成为亚太媒体关注的增长动力样本-news8a608fc692796398
- "加拿大对美反制关税今起生效,“以战止战”能奏效吗-fddf8042
- “我在白崖很想你”争议背后,景区人造设施开发引发审视-newse10c9dbcb88b5792
- 澳总理搞双标,网友看不下去了-8d5a7c2d
- 鲁媒:山东男篮新赛季首个大外援法耶抵达济南 正式到队 -3e8c4fc7
- 大风追踪丨驾车驶入青海哈拉湖水域,站车顶打卡拍照,涉事男子道歉-917edb26
- 【青春华章·长征路上山河新】“红色草药”守护将士长征路-8593d705
- 西电新生数学入学考试题难到离谱,考17分就能击败近六成学生,高中数学老师直播做该试卷仅得36分:多为竞赛题,考分低不足为奇-ff17be0a
- 史上最贵iPhone!苹果首款折叠iPhone预计售价超1.6万-c50da15b
-

中情局局长,“上门警告”-a1a7dd5a
"来试试!小托马斯:想去海外打球,欧洲还是CBA我都能打爆全场-83798159"
6天前
-

以色列国安部长发布视频羞辱巴勒斯坦被扣押者:很高兴将巴勒斯坦人的待遇降到最低,“女性毫无隐私”;曾扬言“每晚清除30到40人”-06eb2eb3
前主编Global丨外媒:分歧加重,伊朗权力斗争或决定战争何时结束-6b23c880
3天前
-

亚太媒体高端论坛凝聚合作共识 共绘开放创新合作新篇章
"媒体人:中国女篮一场关键胜利后重回正轨 现在只差最后20分钟-9cd005d6"
0天前
-

凯发app下载带来便捷娱乐体验的全新选择
粮交会展示粮食安全新装备 从田间机械到智慧检测守护粮安-news958ddbf0357169de
8天前
-

索尔斯克亚:当你拥有姆巴佩时,你就知道随时都能赢下比赛-8088f55d
美特使将会见泽连斯基,与普京3小时谈了些啥?俄乌同意停火3天,不打对方首都-22867b79
2天前
-

“我在白崖很想你”争议背后,景区人造设施开发引发审视-newse10c9dbcb88b5792
大兴这些老旧小区改造最新消息来啦!-2e9da398
5天前
-

行业ETF风向标丨中韩半导体ETF华泰柏瑞(513310)大幅缩量,煤炭ETF国泰(515220)半日涨幅达3%-03692459
以色列国安部长发布视频羞辱巴勒斯坦被扣押者:很高兴将巴勒斯坦人的待遇降到最低,“女性毫无隐私”;曾扬言“每晚清除30到40人”-06eb2eb3
1天前
-

开放合作,培育更多“中国服务”品牌-f4a86dbe
“我在白崖很想你”争议背后,景区人造设施开发引发审视-newse10c9dbcb88b5792
5天前
-

西裁委会:姆巴佩罚点时巴尔特拉一只脚仍着地,点球无需重罚-00baaa07
金晨在洛杉矶过36岁生日,和孟佳坐游艇出海,鼻子上的创可贴抢镜-d7e605dc
2天前
-

伊朗军方:绝不容忍任何侵略行为-302286a0
港股通名单调整生效首日表现分化 新纳入与调出个股均现明显波动-rssai8e6c3849eee15822
5天前
-

芭堤雅如此迎接“林肯”号“休息与娱乐”?-f78e4fda
美特使将会见泽连斯基,与普京3小时谈了些啥?俄乌同意停火3天,不打对方首都-22867b79
5天前
-

特斯拉弃用稀土造新电机!仅适配低速小车,是突破还是妥协?-acd02760
原来陶昕然早已离婚,十年AA制婚姻,今一个单亲养娃一个事业下滑-2bd41aa0
5天前
猴子
毛凤生 

















