Sold
Available
IBL-26-1354

강화학습모델을 이용한 보행 동작 정보 출력 방법 및 서비스 장치

등록일
2026-07-24
로봇관련 기술 보행형 로봇 제어/AI/SW
0.09
CI (SI)
★★★★★★★★★★
1.39
TR (N)
★★★★★★★★★★
0.06
MC
★★★★★★★★★★
참조 동작 없이 보상 함수로 학습하는 강화학습 기반 보행 동작 생성 기술

본 기술은 심층 강화학습과 유한 상태 기계를 결합하여 캐릭터의 보행 동작을 실시간으로 산출하며, 동적 상태와 캐릭터 특이적 파라미터를 신경망에 입력해 액션 정보를 생성하고 보상 함수로 자연스러운 보행 정책을 학습하는 기술입니다.

종래의 유한 상태 기계 기반 제어 방식은 자연스러운 동작 구현에 한계가 있었고, 기존 딥러닝 방식은 보행 결정을 위해 별도의 참조 동작 데이터가 필수적으로 요구되어 구현의 범용성과 효율성이 떨어졌습니다.

본 기술은 참조 동작 데이터 없이 보행 파라미터 편차 최소화와 수직축 유지, 진행 방향 정렬, 관절 토크 최소화를 보상 함수에 포함하여 최적의 스탠스 힙 토크와 관절 각도를 결정합니다. 이족보행 로봇 제어와 게임·애니메이션 캐릭터 동작 생성에 적용될 수 있어 데이터 수집 부담 없이 자연스러운 보행을 구현합니다.

Key Features:
  • 컴퓨터 장치가 시점 t에서의 캐릭터의 보행 동작 상태 정보를 획득하는 단계
  • 획득한 상태 정보를 사전에 구축한 신경망 모델에 입력하여 액션 정보를 생성하는 단계
  • 시점 t에서의 액션 정보를 캐릭터 또는 캐릭터의 동작을 출력하는 장치에 전달하는 단계
  • 신경망 모델이 보행 동작 상태를 입력받아 강화 학습의 보상을 최대화하는 행동 정보를 결정하는 구성

본 발명은 과학기술정보통신부의 다수준의 상호작용을 포함하는 인체 운동 기술의 생체역학적 모델 기반 지능형 제어 기술 개발, 과학기술정보통신부의 DeepXR : 심층 극사실감 연구 지원을 통해 개발되었습니다.

한양대학교 산학협력단
이윤상 | 강규철
문서
출원일:
2021-04-09
|
특허등록번호:
10-2611126
산업
로봇•자동화
게임•엔터테인먼트
기술
인공지능
로보틱스
국가
Korea
패밀리 특허

N/A

제시 가격
가격협의
뉴스레터를 구독하시면 최신 특허 정보를 가장 빠르게 받아보실 수 있습니다.
← 목록으로 돌아가기