Meta開源可以把素描變成動畫的AI專案Animated Drawings

Meta的基礎AI研究（Fundamental AI Research，FAIR）團隊本周發表了新的AI開源專案Animated Drawings，能夠將兒童所創作的人物素描變成動畫，該專案包含了演算法及近18萬張具備註解的素描，可望協助創作者與開發者打造相關經驗與產品。

為了蒐集大量的素描來訓練AI模型，FAIR團隊在2021年時便建立了Animated Drawings Demo，這是個可透過網頁存取的示範服務，讓創作者可上傳他們的素描，檢視與校正模型預測，繼之收到基於該素描角色而衍生的動畫。

有趣的是，原本該團隊的目標只想蒐集1萬張素描圖片，不料該示範服務引起熱烈的迴響，在短短的幾個月內就收到了超過160萬張素描，最終全球總計有320萬人造訪過該站，上傳到該服務的素描數量多達670萬張。

原因之一可能是Animated Drawings Demo的介面很簡單，使用者上傳素描作品後，可選擇要執行動畫的角色，確認角色的關節位置，就能建立動畫了，不到一分鐘就能將原本處於畫紙上的靜態角色變成活蹦亂跳的動畫人物。

圖片來源／Meta

此外，Meta也發現使用者對Animated Drawings的興趣超乎想像，他們其實只想蒐集來自兒童的素描，卻發現使用者上傳了五花八門的圖案，從企業商標、填充玩具、寵物、人偶，到各種想要它們變成動態的內容，且就算該示範服務指定只要人物的素描，但使用者上傳了鳥、魚與各種動物，也熱情地提供了各式各樣的意見，例如想要透明的背景，希望可支援不同的骨架，要有表情，可以多個角色一起互動，以及音效、情境與文字功能等。

面對襲來的大量建議，FAIR決定直接將Animated Drawings開源。Meta表示，未來除了內部專案會導入Animated Drawings之外，也期望透過開源以讓全球創作者與開發人員共同建立將素描變成動畫的更多樣化的體驗。

雖然全球使用者上傳的素描數量多達670萬張，但Meta進行了多次的過濾行動，包括僅選擇那些同意與研究團隊分享的素描，再加上隱私與安全考量，以及剔除不符合該專案要求的圖片等等，最後收錄在資料集中的素描則接近18萬張。