동영상에서 본 움직임을 자동으로 포착하고 흉내낼 수 있는 강화학습 알고리즘

연구팀은 엔비디아 GeForce GTX 1080 TI 및 TITAN Xp GPU와 cuDNN 가속화 텐서플로우(TensorFlow) 딥러닝 프레임 워크를 사용하여 여러 데이터 세트에 대한 강화학습 시스템을 학습하여 캐릭터의 포즈를 추정하고 다양한 비디오 클립에서 모캡(mocap) 데이터를 추출했다
또한 시스템은 비디오 클립을 주면 알고리즘이 각 프레임의 액터의 포즈와 움직임을 추정한다
한편 이 동영상에서 본 움직임을 자동으로 포착하고 흉내낼 수 있는 강화학습 기반의 시스템은 "SFV: Reinforcement Learning of Physical Skills from Videos"이란 제목으로 지난 15일 아카이브를 통해 발표됐으며, 논문의 핵심은 포즈 추정(포즈 트래킹)과 강화학습을 통합한 비디오 클립에서 캐릭터 제어를 학습하는 시스템으로 이를 가능하게 하기 위해 자세 추적 시스템과 강화학습 알고리즘에 대한 여러 가지 확장 기능을 소개했다.
출처 : http://www.aitimes.kr/news/articleView.html?idxno=12686