杨立昆让世界模型学会「如果当时」:只看一次结果,就能推算另一种选择
相关推荐
杨立坤4年前的构想交卷:H-JEPA迷宫成功率从18%升至73%
动察 Beating AI 快讯,杨立坤创办的 AMI Labs 联合多所高校公布 H-JEPA,一种能够分层预测未来、规划动作的世界模型。高层负责远期目标,低层负责具体动作。论文、代码和预训练权重均已公开。 H-JEPA 延续了 JEPA 的思路。它先把画面转成抽象的环境特征,再结合动作预测未来状态,不必逐帧生成视频。但长期规划和眼前控制需要的信息不同。比如四足机器人走迷宫,选路线主要看位置和通道,迈腿却离不开身体姿态。单层模型用同一套特征兼顾两件事,规划越远越吃力。 H-JEPA 将多个 JEPA 组成不同的规划层级。高层预测更远的未来,把中途目标交给下层,再逐步细化成具体动作。与此前各层共用同一套特征的 HWM 不同,H-JEPA 让每个层级学习自己的环境特征。在迷宫实验中,高层保留了位置信息,逐渐忽略腿部姿态等短期细节。杨立坤早在 2022 年就提出过类似构想,如今团队给出了可以端到端训练的实现方案。 在 Visual AntMaze 仿真迷宫中,三个规划层级的 H-JEPA 成功率达到 73.3%,单层 LeWorldModel 为 18.0%,前者所需的规划计算量更少。不过,规划层级并非越多越好。在模拟推物体的 Push-T 任务中,三层模型反而不如两层。团队还用真实机器人录像数据集 DROID 进行了离线测试,预测动作轨迹比单层模型更接近专家示范。
杨立昆:AI失控事件可通过工程改进预防,AMI Labs将于近期推出首款产品
PANews 10月1日消息,据《财富》报道,图灵奖得主、AMI Labs创始人杨立昆(Yann LeCun)在采访中表示,他认为近期AI智能体失控事件主要源于人为监督及沙箱设计不足,可通过工程改进预防。他还透露,AMI Labs目前约有60名员工,正基于JEPA架构开发面向工业应用的世界模型,首款产品将于“近期”推出。
AMD完成对World Labs的收购:李飞飞出任AMD执行副总裁兼首席科学家
PANews 11月16日消息,AMD宣布已完成对World Labs的收购。World Labs由人工智能领域研究人员李飞飞联合创立,专注于开发能够创建和模拟交互式3D环境的AI模型,以及机器人学习和仿真技术。李飞飞将加入AMD,担任执行副总裁兼首席科学家,直接向AMD董事长兼CEO苏姿丰汇报。AMD表示,World Labs团队将继续推进基础模型研究,并与AMD工程师合作,将模型能力研究成果应用于未来AI基础设施的开发,以支持开放AI生态系统中的客户和开发者。
阿联酋AI公司G42:正与杨立昆旗下的AMI Labs探索面向物理世界的人工智能技术
PANews 10月20日消息,阿联酋人工智能公司G42:正与杨立昆旗下的AMI Labs探索面向物理世界的人工智能技术。
AMD 同意以 82 亿美元收购 World Labs
ChainCatcher 消息,市场消息称 AMD 同意以 82 亿美元收购李飞飞的人工智能初创公司 World Labs。
World Labs联合创始人李飞飞呼吁对人工智能进行独立监管
当地时间周二,斯坦福大学教授、World Labs联合创始人李飞飞呼吁由独立和公共部门实体对AI技术进行更多监督,认为对功能日益强大的AI系统进行安全评估不应仅仅由开发这些系统的公司负责。李飞飞表示,虽然AI公司内部的研究人员可以衡量单个模型的效力和安全属性,但这并不能取代政府、行业和学术机构制定的更广泛标准,“我仍然相信独立机构和学术界等公共部门机构制定基准的重要性,以及产业界和政府共同承担责任的重要性。”(财联社)