메타(구 페이스북)는 인간의 지도 없이 어린이 그림에서 인간과 유사한 인물을 식별하고 애니메이션화할 수 있는 AI 시스템을 개발했다. 이것은 형태, 신체 대칭 및 관점이 거의 없는 다양한 형태, 색상, 크기 및 축척으로 제공되는 인물을 자동으로 애니메이션할 수 있는 최초의 방법이다.
이 기능을 사용하려면 부모가 작품을 시스템에 업로드해야 하며, 아이들의 그림이 형태를 잡고 건너 뛰고, 뛰고, 춤추는 움직이는 캐릭터가 되는 것을 보는 흥분을 경험할 수 있다. 이 도면은 다운로드할 수 있으며 AI 모델을 개선하기 위해 제출할 수도 있다.
그림에 애니메이션을 적용하는 첫 번째 단계는 인물과 배경 및 기타 유형의 캐릭터를 구별하는 것이다. 객체 감지 기술은 정확한 애니메이션 분할이 부족하기 때문에 메타Meta 연구원들은 경계 상자, 이미지 처리 및 형태학적 연산을 사용하여 마스크를 얻었다.
“우리는 어린이가 손으로 그린 사람과 인간과 유사한 캐릭터(두 팔, 두 다리, 머리 등을 가진 캐릭터)를 자동으로 애니메이션으로 만드는 최초의 방법을 발표하게 되어 기쁘게 생각한다. AI를 사용하면 몇 분 만에 생명을 얻을 수 있다.”라고 Meta 연구원들은 성명에서 말했다.
그들은 또한 그림에서 인간과 유사한 캐릭터를 추출하기 위해 Meta의 컨볼루션 신경망 기반 객체 감지 모델인 Mask R-CNN을 사용했다. 이 모델은 도면이 아닌 실제 물체의 사진으로 구성된 가장 광범위하게 공개적으로 사용 가능한 분할 데이터 세트에 대해 사전 학습된다.
메타Meta는 동료들을 초대하여 아이들의 작품을 공유하고 애니메이션으로 만들어 AI를 무생물로 훈련시켜 약 1000개의 그림을 얻었다. 연구원들은 복잡한 도면에서 상세한 애니메이션 만화를 즉시 생성할 수 있는 AI 시스템을 기대하고 있다.
