西风 发自 凹非寺

量子位 | 公众号 QbitAI

苹果要搞东谈主形机器东谈主这事儿当今传得沸沸扬扬。

最近他们如实有新动作——开拓了一套机器东谈主感知系统！

系统名为ARMOR，软硬件协同增强机器东谈主的“空间强劲”，能动态防碰撞的那种。

硬件方面，ARMOR通过在机器东谈主手臂上安设微型智能深度传感器，为机器东谈主提供果真无缺的环境视图，管束了传统机器东谈主感知中的盲点和结巴问题。

软件方面，苹果开拓了一个基于Transformer的AI发轫ARMOR-Policy，粗略从东谈主类动作中学习，匡助机器东谈主动态筹谋行动。

团队还将ARMOR部署在了傅利叶GR-1机器东谈主上进行践诺。

践诺驱散清晰，与使用四个头戴式和外部安设的深度相机（外心感知）比拟，ARMOR系统使碰撞镌汰了63.7%！

与基于采样的指令筹谋群众系统cuRobo比拟，ARMOR-Policy计较恶果进步26倍，确保机器东谈主粗略马上行动。

看到苹果在东谈主形机器东谈主方面的布局，网友直呼这是势在必行：

他们不成能长久依赖智高手机赢利。从长久来看，机器东谈主市集将远大于智高手机市集。

ARMOR系统长啥样？

现时，传统东谈主形机器东谈主频频依赖头部或躯干安设的汇聚式相机和激光雷达进行环境感知，这种模样天然易于集成且能提供较好的视线范围，但在手臂和手部区域往往存在严重的结巴问题。

天然一些讨论尝试在机器东谈主终局实行器上集成触觉传感，但这种有谋略本钱不菲，且难以大鸿沟应用于机器东谈主手臂，同期在战略学习中奈何有用愚弄触觉输入仍待管束。

ARMOR系统，提供了一种硬件和软件整合想象，它由来自卡内基梅隆大学的学者Daehwa Kim在苹果实习时期与苹果团队共同开拓。

在硬件方面，与汇聚式RGBD相机一次性捕捉密集帧中的一齐细节不同，团队选拔了SparkFun VL53L5CX翱游时刻（ToF）激光雷达动作基础传感单位，将荒芜感知分散在多个传感器上，酿成“以自我为中心的感知”。

这种传感器体积为6.4×3.0×1.5mm，不错以15Hz的频率提供8×8差异率的深度图像，对角视场为63°，测距范围达4000mm。

讨论团队在机器东谈主的每个手臂上嘱咐了20个这么的传感器，揣度40个传感器酿因素布式感知收罗。

每四个传感器结合到一个XIAO ESP微截止器，通过I2C总线进行数据读取，再通过USB传输到机器东谈主的板载计较机（Jetson Xavier NX），终末无线传输到配备NVIDIA GeForce RTX 4090 GPU的Linux主机进行处理，确保总计这个词系统粗略保管15Hz的刷新率。

在软件方面，讨论团队开拓了基于Transformer编码器-解码器架构的ARMOR-Policy，近似于动作分块Transformer（ACT）。

该战略通过效法学习从无碰撞的东谈主类指令演示中学习。

为了教训这个战略，讨论团队使用了AMASS数据汇聚的311922个东谈主类着实指令序列（约86.6小时），这些数据包含了各式谋划的东谈主类姿态，ag百家乐网站如操作、跳舞和打刊行动等。

团队将这些东谈主类动作轨迹重定向到机器东谈主的环节建立上，并在轨迹周围生成紧凑的不容物，确保轨迹本人不发生碰撞。

教训数据的生成收受了三种战略：避障指令、进军罢手和无碰撞指令。

ARMOR-Policy的收罗架构想象讨论到了指令筹谋可能存在多个有用解的特质。通过引入迥殊的编码器层来推断潜在变量z，使战略粗略通过调度z生成不同的指令轨迹候选。

在推理阶段，系统会并行计较N个候选轨迹，并通过最小化机器东谈主与点云之间的距离来选拔最优旅途。收罗输入包括潜在变量z、现时和见地环节位置（28维向量），以及40个ToF激光雷达传感器的深度图像数据。

深度图像通过修改后的单通谈ResNet18主干收罗处理，提真金不怕火512维特征。总计这个词收罗架构包含约84M参数。

践诺考据清晰，ARMOR系统在多个方面王人优于现存有谋略。

与使用四个头戴式和外部安设的深度相机（外部感知）的传统战略比拟，ARMOR系统在避障性能上获取了显贵进步，碰撞镌汰63.7%，见遵守进步78.7%。

同期，与基于采样的指令筹谋群众系统cuRobo比拟，ARMOR-Policy证实出更好的性能，碰撞减少31.6%，见遵守提高16.9%，计较恶果更是进步了26倍。

讨论团队还通过在傅利叶GR-1东谈主形机器东谈主上部署28个ToF激光雷达，本体考据了ARMOR系统在着实环境中的应用可行性，系统粗略驱散15Hz的及时避障轨迹更新。

“苹果作念机器东谈主果真是势必的”

最近，对于苹果发力东谈主形机器东谈主的爆料频出。

比如彭博社爆料，苹果正在寻找其“下一个要紧样式”，机器东谈主恰是其调治的鸿沟之一。苹果工程团队正在开拓多种家庭机器东谈主建筑以及可能增强家庭机器东谈主实用性的AI软件和功能。

而苹果机器东谈主研刊行为由硬件工程部门和John Giannandrea带领的AI与机器学习团队共同进行。

更有爆料指出，苹果将优先打造桌面机器东谈主，它将动作“家庭指挥中心”，可用于 FaceTime视频通话以及家庭安全监控。

这一系列举动也激发了网友多数谋划。

有网友分析，苹果在东谈主形机器东谈主赛谈的布局，果真是势必的：

苹果东谈主形机器东谈主？这不仅是可能的，果真是势必的。凭借他们的想象理念和生态系统整合，他们将为个东谈主机器东谈主设定一个高尺度。

跟着智高手机的逐渐淘汰，机器东谈主如实有可能成为下一个渊博存在的时刻。思象一下，Siri体当今一个前锋的东谈主形助手中，这将是一个游戏规矩的蜕变者！

这种分析立马遭到其他网友反驳，揭老底：

苹果之前也吵吵着要作念自动驾驶汽车，但终末依然烧毁了。天然苹果有才调开拓东谈主形机器东谈主，但会不会真作念依然不太剖析。

苹果偏好主导市集，不心爱濒临热烈的竞争，而东谈主形机器东谈主和AI市集将极具竞争性。

那么，你看好苹果作念东谈主形机器东谈主吗？

论文连络：https://arxiv.org/pdf/2412.00396v1参考连络：https://x.com/Dr_Singularity/status/1873374876867723435

— 完 —

量子位 QbitAI · 头条号签约

调治咱们下载AG百家乐，第一时刻获知前沿科技动态