본 기술은 증강현실 장치를 통해 획득한 영상에서 객체를 실시간으로 감지하고 광선 투사 및 메쉬 생성 기술로 객체의 3차원 좌표를 산출하여, 로봇팔의 목표 위치를 정밀하게 제어하는 증강현실 객체탐지 기반 로봇팔 제어 시스템입니다.
기존 컨트롤러 방식이나 시선 추적 방식은 사지 마비 환자 등 신체 부자유자가 로봇팔을 직접 조작하기 어렵고, 모니터 화면과 로봇팔 위치를 동시에 주시해야 하는 불편함과 충돌 위험성이 존재했습니다.
본 기술은 증강현실 장치로 사용자 시선을 인식하여 특정 객체를 선택하고 해당 객체와 로봇팔 간의 상대적 거리와 3차원 좌표를 산출하여 로봇팔이 자동으로 이동 및 파지 작업을 수행하도록 하는 방식을 제안하며, 이를 통해 직관적이고 안전한 조작을 구현할 수 있습니다. 재활 보조와 장애인 생활 지원, 원격 작업 등에 활용될 수 있어 신체 제약이 있는 사용자의 자립도와 삶의 질을 크게 향상시킵니다.
본 발명은 과학기술정보통신부의 정확성, 신속성 및 편리성을 향상한 지체장애인 맞춤형 뇌-로봇 인터페이스 개발, 과학기술정보통신부의 (BCI-총괄/1세부) 생각만으로 실생활 기기 및 AR/VR 디바이스를 제어하는 비침습 BCI 통합 뇌인지컴퓨팅 SW 플랫폼 기술 개발 지원을 통해 개발되었습니다.
N/A
