UNIST 연구팀이 개발한 동작 생성 기술(Text2HOI)은 '사과를 양손으로 전달해'라는 명령을 입력하면 손과 사과 간의 가능한 접촉 지점을 확률적으로 계산한다.게티이미지뱅크 제공
단순한 텍스트 입력만으로 정밀한 3D 모션을 구현할 수 있는 기술이 등장했다.
울산과학기술원(UNIST)은 백승렬 인공지능대학원 교수 연구팀이 프롬프트 입력 창에 텍스트를 넣으면 3D로 손과 물체의 상호작용 동작을 생성하는 기술(Text2HOI)을 개발했다고 19일 밝혔다.
이 기술은 크게 두 가지 기술로 이뤄져 있다.첫 번째는 사용자가 입력한 텍스트를 분석해 손동작과 물체의 접촉 지점인 '접촉 지도'를 예측하는 기술이다.예를 들어 '사과를 양손으로 전달해'라는 명령을 입력하면 손과 사과 간 가능한 접촉 지점을 확률적으로 계산한다.
UNIST 기술을 이용해 손과 물체의 상호작용 동작 생성한 결과.UNIST 제공
두 번째는 트랜스포머 모델이 적용된 동작 생성 기술이다.트랜스포머 모델은 문장 속 단어와 단어의 관계를 추적해 맥락과 의미를 학습하는 신경망 기술이다.텍스트에서 파생된 지시와 접촉 지도에서 파악된 구조적 정보를 결합해 실시간으로 3D 손-물체 동작을 시뮬레이션하는 원리다.
이 기술은 의료 분야에서 수술 절차를 시뮬레이션하거나 게임,지엘린스키 등번호가상현실에서 캐릭터 동작을 제어하고 복잡한 과학 실험을 가상으로 수행하는 등 다양한 산업 분야에서 응용 가능하다.로봇공학에서도 이 기술을 적용해 정밀하게 손동작을 제어하면 로봇과의 자연스러운 상호작용이 가능해질 전망이다.
이번 연구 논문의 제1저자인 차준욱 UNIST 연구원은 “텍스트 프롬프트와 손과 물체의 상호작용 동작 생성 간의 관계에 대한 초석이 되어 앞으로 더 많은 관련 연구가 이루어지길 바란다”고 말했다.
“Finding NoiseAware was a miracle for us. We now have peace of mind that our neighbors have a peaceful neighborhood.”
"Every single unit that we have has NoiseAware. Every single unit that we go into will have NoiseAware. It's our first line of defense."
"We let neighbors know we're using NoiseAware to prevent parties. We want to show them that having great neighborly relationships is a priority for us, and for the whole short-term-rental community."
"I can tell my owners, 'Not only do we have insurance, but we also have guest screening and we have NoiseAware. We have multiple layers of protection for your property."
