텍스트 및 감정 임베딩 기반 컨텍스트 어웨어 모션 생성 기술

텍스트와 감정 임베딩으로 감정 맥락을 부여하는 컨텍스트 어웨어 모션 생성 기술

본 기술은 텍스트 프롬프트와 감정 정보를 각각 벡터화해 텍스트 임베딩과 감정 임베딩을 생성하고, 생성형 인공지능 모델에 감정 임베딩을 조건으로 반영해 감정적 맥락이 부여된 모션 시퀀스를 생성하는 기술입니다.

텍스트 기반 모션 생성은 동작의 내용은 표현해도 감정의 뉘앙스나 강도를 반영하기 어려워, 같은 동작이라도 감정에 따른 표현 차이를 구현하기 어려운 문제가 있었습니다.

본 기술은 감정 임베딩과 감정가중치로 확산 과정을 제어하고 얼굴·손·자세를 감정에 맞게 조정함으로써, 3D 캐릭터 콘텐츠에 적용되어 감정 맥락이 반영된 표현력 있는 모션을 생성할 수 있습니다.

‍

‍

Key Features:

• 캐릭터의 동작을 지시하는 텍스트 프롬프트와 동작에 부여될 감정 정보를 포함하는 입력 정보를 수신하는 프로세서 및 메모리
• 텍스트 프롬프트와 감정 정보를 각각 벡터화하여 생성한 텍스트 임베딩 및 동작의 뉘앙스를 결정하는 감정 임베딩
• 텍스트 임베딩을 기반으로 모션 시퀀스를 생성하되 감정 임베딩을 조건으로 반영하여 감정적 맥락을 부여하는 생성형 인공지능 모델
• 감정 정보의 강도에 따라 조절되어 확산 과정 또는 어텐션 메커니즘에 적용됨으로써 감정 표현의 깊이를 상이하게 하는 감정가중치

‍

본 특허 포트폴리오는 주식회사 범블비가 개발한 AI 기반 3D 모션 생성 특허기술로, 총 4건의 패밀리 특허로 구성되어 있습니다. 특허와 함께 기술이전이 가능하며, 판매 가격은 협의하여 진행 가능합니다. 자세한 기술 내용은 첨부된 기술설명서를 확인해 주시기 바랍니다.

‍