谷歌“怪獸生成器”發(fā)布!你畫草圖,GAN幫你生成幻想生物

CG人物
2020-11-19 13:59:32 文/羅霞 圖/鄒梓涵
大數(shù)據(jù)文摘出品,作者:牛婉楊,不知道你是否聽說過這樣一個游戲——《山海GO》,名字是不是有點(diǎn)眼熟?沒錯,和口袋妖怪GO類似,只不過,在這款游戲中收集的都是《山海經(jīng)》中的鬼怪~ 就像這樣:
近日,谷歌發(fā)布了一個小工具,有了這個工具,隨手涂個鴉就能變成3D立體小怪獸。這聽起來有點(diǎn)意思,或許未來像《山海GO》里面的角色卡片,都可以讓玩家自行創(chuàng)造呢~
那我們先來看看谷歌這款工具是怎么把涂鴉變怪獸的:
原來我們只需要用不同的色塊畫出怪獸不同的部位就可以了,剩下的通過AI來渲染。文摘菌竊喜,我們手殘黨再也不用害怕畫畫了,畫得不好就交給AI唄~
這個工具叫做Chimera Painter,這是一種機(jī)器學(xué)習(xí)模型,可以根據(jù)用戶提供的生物輪廓自動填充完整并加以渲染。這種技術(shù)在AI圈頗為流行,英偉達(dá)就曾利用AI填充過風(fēng)景畫,MIT和IBM也曾用來填充過建筑物的效果圖。
谷歌研究人員稱,他們想要創(chuàng)造一種“不像工具,更像助手的畫筆”。Chimera Painter只是一個原型,但如果這樣的軟件變得普遍,它可以“減少創(chuàng)造高質(zhì)量藝術(shù)所需的時間”。
研究人員之所以創(chuàng)建這樣的工具,是想挑戰(zhàn)為一個虛構(gòu)的幻想紙牌游戲創(chuàng)作角色卡片,在這個游戲中,玩家可以將不同怪物的特征結(jié)合起來,并像對付變了形的口袋妖怪一樣對付它們。
研究人員生成的虛擬怪物角色卡片
為了創(chuàng)建這些角色卡片,研究人員用到了生成對抗網(wǎng)絡(luò)(GAN)。GAN可以將兩個卷積神經(jīng)網(wǎng)絡(luò)相互配對:一個用于生成新圖像的生成器網(wǎng)絡(luò),一個用于確定這些圖像是否來自訓(xùn)練數(shù)據(jù)集的鑒別器網(wǎng)絡(luò)。
為了訓(xùn)練GAN,研究人員創(chuàng)建了全彩色圖像的數(shù)據(jù)集,其中包含根據(jù)3D生物模型改編的單一物種生物輪廓。該生物輪廓線描繪了每個生物的形狀和大小,并提供了可識別各個身體部位的分割圖——將怪物分成爪子、鼻子、腿等解剖部分。
經(jīng)過模型訓(xùn)練后,模型的任務(wù)是根據(jù)藝術(shù)家提供的輪廓生成多物種的嵌合體。然后將性能最好的模型合并到Chimera Painter中。