
Yann LeCun:LeWorldModel端到端像素级世界模型
LeWorldModel (LeWM) 新型潜在世界模型,旨在通过原始像素输入实现稳定且高效的端到端学习。该模型采用联合嵌入预测架构 (JEPA),仅通过预测损失和 SIGReg 正则化项来防止表示崩溃,极大地简化了超参数调节并确保了训练稳定性。LeWM 在 2D 和 3D 控制任务中表现出色,其规划速度比基于基础模型的同类架构快达 48 倍。此外,实验证明该模型的潜在空间能够编码深刻的物理结构,并能有效检测违背物理常识的异常事件。这种方法为开发低成本、高性能且具备物理直觉的机器人规划系统提供了新途径。
The skinny
The skinny isn't ready yet — notes appear once the transcript is processed.