이미지: X — 뉴스 앰프
摘要
- Matic为其家用清洁机器人新增了语音与手势结合指令功能的更新
- 用户说出"Hey Matic, clean this"并指向特定地点时,机器人会将手臂方向与3D地面地图匹配后移动过去
- 机器人搭载5个RGB-IR摄像头和车载NVIDIA计算机,可实现设备端处理
- 발표일
- 2026-08-13(현지시간), X 공식 계정 발표
- 업데이트 내용
- 음성과 포인팅 제스처를 결합한 청소 위치 지정 기능
- 명령 예시
- "Hey Matic, clean this"라고 말하며 지점을 가리키면 해당 위치로 이동
- 인식 방식
- 로봇 팔 위치 파악 후 가리키는 방향을 투영, 저장된 3D 바닥 지도와 매칭
- 카메라 구성
- RGB-IR 카메라 5개 탑재
- 연산 방식
- 온보드 엔비디아 컴퓨터로 온디바이스 처리
- 개발사
- Matic(홈 클리닝 로봇 스타트업)
用一根手指指定清扫位置
用户无需再通过App一一为机器人标注地板上凌乱区域的位置。家用清洁机器人制造商Matic宣布,已为其机器人应用了同时识别语音与手势的更新。用户只需用手指向地板上的特定位置,并说出"Hey Matic, clean this",机器人便会移动到该位置开始清扫。
有何变化
此前已有可通过语音指令下达清扫指示的扫地机器人,但此次更新的核心在于将"手指的方向"转化为实际物理空间中的坐标这一过程。机器人首先识别用户手臂所在的位置,再将该手臂指向的方向投射到三维空间中。随后,将由此计算出的方向与机器人事先生成并保存的3D地面地图进行比对,从而确定精确的清扫地点。仅凭语音,机器人无法理解"那边""这边"之类的指示词,而通过加入手势这一物理信号,便解决了这一问题。
使用方法
根据已公开的内容,使用方式整理如下:
- 在机器人处于激活状态时,用手指指向地板上凌乱的区域。
- 同时说出"Hey Matic, clean this"。
- 机器人通过摄像头识别用户手臂的位置和方向。
- 将识别出的方向与机器人内部保存的3D地图进行匹配,确定目标位置。
- 机器人移动到该位置执行清扫。
在此过程中,与以往方式不同的是,用户无需另外打开App或放大地图来标注位置。
技术背景——为何选择设备端处理
Matic机器人内置5个RGB-IR摄像头和NVIDIA车载计算机。RGB-IR摄像头是一种可同时接收普通色彩信息和红外信息的传感器,即便在昏暗环境中也能识别物体位置。像手势识别这类需要每时每刻实时处理摄像头画面的任务,如果采用将画面发送至云端服务器再接收结果的方式,很容易产生延迟。若机器人内部的计算机直接完成运算,即采用设备端处理方式,便可实现无延迟的即时反应。
同时识别语音与身体动作来处理指令的方式,是近期多个领域中可见的趋势。例如,谷歌DeepMind于8月12日发布的手语识别模型SL2T,也采用了在设备内部追踪手部动作,而将其转换为文本的计算交由服务器处理的结构。通过摄像头读取人体信号的部分在设备内完成,而对其进行解读的繁重运算则根据情况分配给服务器或车载芯片,这样的设计正在增多。
机器人为何需要理解人的肢体动作
长期以来,如何让家用机器人准确获知位置一直是个难题。仅凭语音难以确定具体位置,而通过App地图标注地点的方式在手忙脚乱或情况紧急时又显得繁琐。此次更新的目标,似乎是让机器人能够像人们平时请他人帮忙打扫时那样,直接接受用手指向并说话这种自然的方式。同时解读物理肢体动作与语言的能力,不仅适用于家用机器人,也可作为在物流仓库或工厂中与人协作的机器人的基础技术。
由此带来的变化
通过此次更新,Matic机器人用户无需打开App操作地图,仅凭手势和语言即可指定清扫地点。这可以被视为一个信号:扫地机器人已经越过自主绘制家中地图的阶段,正迈向实时解读并响应人体动作的新阶段。随着家用机器人搭载的摄像头和车载运算装置日益增多,人与机器人之间的沟通方式很可能会逐渐从屏幕触控转向肢体动作与对话。
