매틱 청소로봇, 손으로 가리키면 그 자리로 간다

손가락 하나로 청소 위치를 찍는다

어질러진 바닥을 보고 로봇에게 일일이 앱으로 위치를 지정할 필요가 없어졌다. 홈 클리닝 로봇을 만드는 매틱(Matic)이 음성과 손동작을 함께 인식하는 업데이트를 자사 로봇에 적용했다고 밝혔다. 사용자가 바닥의 특정 지점을 손으로 가리키며 "헤이 매틱, 여기 치워줘(Hey Matic, clean this)"라고 말하면 로봇이 그 자리로 이동해 청소를 시작하는 방식이다.

무엇이 달라졌나

기존에도 음성 명령으로 청소를 지시할 수 있는 로봇청소기는 있었지만, 이번 업데이트의 핵심은 '가리키는 방향'을 실제 물리 공간의 좌표로 바꾸는 과정이다. 로봇은 먼저 사용자의 팔이 어디에 있는지 인식한 뒤, 그 팔이 가리키는 방향을 3차원 공간에 투영한다. 이렇게 계산된 방향을 로봇이 이미 만들어 저장해 둔 3D 바닥 지도와 대조해 정확한 청소 지점을 찾아낸다. 음성만으로는 "저기", "이쪽" 같은 지시어를 로봇이 이해할 방법이 없는데, 손짓이라는 물리적 신호를 더해 이 문제를 풀어낸 셈이다.

어떻게 써보나

공개된 내용을 기준으로 사용 방식을 정리하면 다음과 같다.

1. 로봇이 활성화된 상태에서 바닥의 어지럽혀진 지점을 손가락으로 가리킨다.
2. 동시에 "헤이 매틱, 클린 디스(Hey Matic, clean this)"라고 말한다.
3. 로봇이 카메라로 사용자의 팔 위치와 방향을 인식한다.
4. 인식된 방향을 로봇 내부에 저장된 3D 지도와 맞춰 목표 지점을 특정한다.
5. 로봇이 해당 위치로 이동해 청소를 수행한다.

이 과정에서 사용자가 별도로 앱을 켜거나 지도를 확대해 위치를 찍어야 하는 조작은 필요하지 않다는 점이 기존 방식과의 차이다.

기술적 배경 — 왜 온디바이스인가

매틱 로봇에는 RGB-IR 카메라 5개와 엔비디아 온보드 컴퓨터가 들어 있다. RGB-IR 카메라는 일반 색상 정보와 적외선 정보를 함께 받아들여 어두운 환경에서도 사물의 위치를 파악할 수 있게 해주는 센서다. 손동작 인식처럼 매 순간 카메라 영상을 실시간으로 처리해야 하는 작업은 클라우드 서버로 영상을 보내고 결과를 받는 방식으로는 지연이 생기기 쉽다. 로봇 안의 컴퓨터가 직접 계산을 끝내는 온디바이스 처리 방식을 쓰면 이런 지연 없이 즉각적인 반응이 가능해진다.

음성과 신체 동작을 함께 인식해 명령을 처리하는 방식은 최근 여러 분야에서 확인되는 흐름이다. 예컨대 지난 8월 12일 구글 딥마인드가 공개한 수어 인식 모델 SL2T도 손의 움직임을 기기 내부에서 추적하고, 이를 텍스트로 바꾸는 계산만 서버에서 처리하는 구조를 택했다. 카메라로 사람의 신체 신호를 읽어내는 부분은 기기 안에서, 이를 해석하는 무거운 연산은 상황에 따라 서버나 온보드 칩으로 나누는 설계가 늘고 있는 셈이다.

로봇이 사람의 몸짓을 이해해야 하는 이유

집 안 로봇에게 정확한 위치를 알려주는 문제는 오랫동안 쉽게 풀리지 않았다. 음성만으로는 위치를 특정하기 어렵고, 앱 지도로 지점을 찍는 방식은 손이 바쁘거나 급할 때 번거롭다. 사람이 평소 다른 사람에게 청소를 부탁할 때처럼 손으로 가리키며 말하는 자연스러운 방식을 로봇이 그대로 받아들이게 만드는 것이 이번 업데이트의 목표로 읽힌다. 물리적인 몸짓과 언어를 함께 해석하는 능력은 가정용 로봇뿐 아니라 물류창고나 공장에서 사람과 협업하는 로봇에도 적용될 수 있는 기초 기술이다.

그래서 무엇이 달라지나

이번 업데이트로 매틱 로봇 사용자는 앱을 켜고 지도를 조작하는 대신, 손과 말만으로 청소 지점을 지정할 수 있게 됐다. 로봇 청소기가 집안 지도를 스스로 그리는 단계를 지나, 이제는 사람의 몸짓을 실시간으로 해석해 반응하는 단계로 넘어가고 있다는 신호로 볼 수 있다. 가정용 로봇에 탑재된 카메라와 온보드 연산 장치가 늘어날수록, 사람과 로봇 사이의 소통 방식도 화면 터치에서 몸짓과 대화로 점점 옮겨갈 가능성이 크다.