脑电波会是物理AI的下一个解锁点吗?
物理AI发展正面临真实世界训练数据稀缺的瓶颈,Encord等初创公司尝试通过脑电波等新模态制造数据,探索突破之路。
原贴
查看原文原文
中文翻译
物理AI的前沿是加州圣莱安德罗仓库里的一场叠叠乐游戏。那个仓库由Encord公司占用,该公司构建用于训练AI模型的数据工具。Andrew Ceja是一名飞行员——公司对机器人训练师的称呼——他戴着带摄像头的耳机,仔细地从摇摇欲坠的塔上拉出木块,摄像头追踪他所看到的东西。仅这一点对于收集机器人训练数据来说相当常见,但这个耳机还包括传感器,在他小心拆解积木塔时测量他的脑电波。
Encord是少数但不断增长的初创公司之一,它们押注人形机器人和仓库机器人的下一个真正限制将不是模型架构,而是现实世界物理训练数据的极度稀缺。Encord不仅仅帮助机器人公司管理他们已有的数据,还在围绕制造他们没有的数据来构建业务。
Ceja佩戴的脑电波耳机由Zander Labs制造,这是一家德国神经科学初创公司,押注测量大脑活动——以推断错误、意图和惊讶等心理状态——可以创建更有用的数据集来训练模型。Encord与Zander的合作目前是试验性的;Encord表示,目标是构建一个初步的带有脑电波标记的数据集,通过客户的机器人模型运行,并评估它是否真的提高了性能,然后再决定是否扩大规模。
Zander的神经科学家Lucas Gehrke监督这项工作,他说,在给定任务中任何时刻使用的脑活动量,为试图弄清楚何时需要部署最高努力模型的模型构建者提供了线索。
Encord的机器人学习主管Vineeth Velmurugan表示,这是解决机器人数据瓶颈努力的“前沿”。Velmurugan是OpenAI机器人实验室和仓库自动化公司Berkshire Grey的资深人士,他加入Encord是为了建立公司的内部数据创建团队。
Encord成立的初衷是帮助构建机器视觉应用的公司注释数据和评估模型。当他们的客户——Velmurugan说他们与许多领先的机器人公司合作,但他未被授权透露名字——开始将端到端学习应用于机器人操作任务时,高管们意识到他们必须自己生成训练数据,而不是简单地管理数据。
“这些数据根本不存在,”Velmurugan说。生成式AI能为机器人做到像为聊天机器人所做的事情,这一赌注不断撞上同一堵墙。LLM是建立在整个互联网文本之上的,甚至更多。寻找同样的原材料来教神经网络物理操作是具有挑战性的:自动驾驶汽车公司自己收集数据,但这很难扩展。从视频训练可能有效,但它缺乏现实世界数据的保真度。Velmurugan表示,要取得突破,需要一个大约是YouTube视频语料库五倍大小的数据集——这个规模有助于解释为什么数据生成本身已经成为一门生意,而不仅仅是研究问题。
构建机器人大脑的公司现在转向两个主要来源:由佩戴摄像头的工人收集的“第一人称”视频,通常辅以额外的摄像机角度和其他指标,以及从远程操作的机器人收集数据。Encord两者都做,从全球多个工厂获取第一人称数据,并利用其圣莱安德罗设施试验新模态,如脑电波,或围绕特定技能收集数据集以进行微调。
TechCrunch参观时,飞行员们正在使用主从装置——配对的机械臂,一个由人类操作员直接控制,另一个模仿其动作——来创建数据,涉及从壶里倒咖啡到杯子(非常晃荡)和堆叠扑克筹码等任务。“每个人形机器人公司都向我们要过这些,”Velmurugan说。存储架上放着花瓶里的假花、书、塑料蔬菜、猫砂(原文截断)
核心信息
物理AI发展正面临真实世界训练数据稀缺的瓶颈,Encord等初创公司尝试通过脑电波等新模态制造数据,探索突破之路。
- 物理AI发展正面临真实世界训练数据稀缺的瓶颈,Encord等初创公司尝试通过脑电波等新模态制造数据,探索突破之路。
- 原贴提到:The frontier of physical AI is a Jenga game in a warehouse in San Leandr
- 来源:techcrunch.com
成为会员查看完整内容
你已经看到了这篇内容的前置整理,剩余深度部分仅对会员开放。