注:A16Z最近寫了一篇很有意思的文章,談到他們認為的生成式AI和游戲結合在一起的機會在哪,筆者翻譯后對部分內容進行了注解。文章第一部分已經發出,見:A16Z|生成式AI在游戲領域的機會,本篇為第二部分,包括A16Z對游戲+生成式AI領域的市場生態的判斷
1.前言
這篇博文有兩部分,第一部分發到了之前的文章,詳情見:A16Z|生成式AI在游戲領域的機會第二部分是本文對領域的市場生態概述,介紹各個細分市場和各個細分市場的關鍵公司。
市場生態概述
下圖為整體的市場生態情況,描述了A16Z在各個類別中發現的創業公司,在這些具體的項目中,我們看發現了生成式人工智能對游戲的影響,本篇會對每個類別中最有特點的公司和機會進行介紹。
用文本生成平面圖像
從文本提示中生成2D圖像,已生成式人工智能最為廣泛的應用領域之一。諸如Midjourney、StableDiffusion和Dall-E2這樣的工具,直接可以將文本描述生成高質量的二維圖像,并且它們用在了游戲開發和制作的整個生命周期的多個階段。
概念藝術
,對過去的方式進行革新甚至是顛覆,創造出全新的造型角色或者概念。
和插畫有什么區別?
插畫家與游戲的關系更多的是幫其繪制海報、包裝封面等。而與影視、游戲開發的工作真正緊密相關的2D藝術工作之一就是我們所說的ConceptArt。
和漫畫有什么區別?
ConceptArt跟漫畫有很大區別,漫畫是日本一個獨立的體系,更多服務于熱門的輕小說的視覺化。而概念藝術則是服務于游戲,動畫,在風格上表現形式上不受限制,創造出一些超前的,或者是完整的一套設定顯得極為重要。
高通CEO安蒙:5G將助力AI擴展,使數據可與其他設備及云端共享:3月25日消息,高通公司總裁兼CEO安蒙在中國發展高層論壇2023年會“推進數字經濟與實體經濟融合”專場上演講稱,5G是實現數字社會的重要基礎設施,此外,5G還將助力AI擴展,為邊緣計算和端側人工智能帶來諸多益處。
安蒙認為,數字化轉型將實現人與萬物智能互聯。這也意味著超高速、可靠連接隨時隨地、始終連接到云端,具有嵌入式處理器和人工智能(AI)的一系列設備,以及數字孿生的普及。(澎湃)[2023/3/25 13:26:29]
和原畫有什么區別?
ConceptArt幾乎包括所有的角色,場景塑造,跟原畫師不同的地方是,概念設計師必須要主動產出一些更有趣的設計。ConceptArt區別于原畫師,在游戲,動畫項目中扮演一個僅次于主策劃的一個美術向的決策地位,決定這個項目的風格和受眾,因此一個以概念藝術家為目標的畫師,被一種畫風禁錮是不稱職的。)
參考資料:公眾號一沙君:史上最全!ConceptArt專業解析賽德大學ConceptArt專業YufeiZhang的分享--2020-02-0418:00
生成式人工智能工具,在幫助像游戲設計師這樣的角色進行游戲概念探索與靈感啟發都比較有用處。這也是生產過程的一個關鍵環節,例如,某個游戲工作室正在使用上述工具,從根本上加快了他們的概念藝術的開發流程,因為他們只用了一天時間就創造出了一個圖像,而在以前,這個過程需要長達3周的時間,但是具體怎么操作呢?
首先,游戲設計師使用Midjourney來探索不同的靈感,并生成他們認為合適的概念圖像。之后,圖像會被交給專業的概念藝術家,藝術家可以把這些圖像組合在一起,然后創建一個相關主題的連貫圖像,然后將這些圖片輸入StableDiffusion,以形成系列的圖像變化。
YGG、Magic Eden等四家公司成立Web3 Games Collective以支持鏈游發展:金色財經報道,Yield Guild Games(YGG)、Game7、Magic Eden 和 Fenix Games 成立Web3 Games Collective以推動鏈游發展,并在投資、開發、生態合作等方面給予支持。[2023/3/24 13:25:14]
大家會共同討論這些風格各異的圖像風格,然后確定一個,用畫筆手動編輯,然后繼續重復以上過程,直到大家對作品結果感到滿意。在這個階段,再把這個圖像最后上傳給StableDiffusion,創造出最后的藝術作品。
2DProductionArt
還有的游戲工作室在嘗試使用類似的人工智能工具來制作游戲中的美術作品。例如,下圖是來自AlbertBozesan,關于如何使用StableDiffusion來創建游戲中的2D資產的教程。
來源:https://www.youtube.com/watch?v=blXnuyVgA_Y
3DArtwork
3D立體模塊,是目前所有現代游戲以及即將到來元宇宙的重要構建源。虛擬世界和游戲關卡,本質上都是一個3D資產的集合,通過不同的組合和放置方法,修改不同的參數來填充游戲環境。而創建3D元素比創建2D平面圖更為復雜,涉及多個步驟,包括需要制作3D模型、添加紋理和效果。而對于動畫人物來說,還涉及到需要創建一個內部"輪廓",然后在輪廓之上創建動畫。
我們發現有不同的初創公司,在尋找有關3D資產創建過程的各個階段的機會,包括模型創建、角色動畫和關卡制作等等。然而,這部分的業務和創新尚在探索中。
《創智贏家》投資人Kevin O'Leary:LedgerX因監管成為唯一沒有歸零的 FTX 相關實體:金色財經報道,創投節目《創智贏家》明星投資人凱文·奧利里 (Kevin O'Leary) 在出席美國參議院銀行、住房和城市事務委員會《加密貨幣崩潰:為什么 FTX 泡沫破滅以及對消費者的傷害》聽證會時強調了加密監管,他表示 LedgerX 是唯一沒有歸零的 FTX 相關實體,因為該衍生品交易平臺受到美國商品期貨交易委員會監管。不過凱文·奧利里在聽證會上抨擊了 CZ,聲稱加密貨幣交易所 Binance “故意”造成 FTX 破產。(decrypt)[2022/12/15 21:46:04]
三維資產
試圖往創建3D模型方向發展的初創公司包括Kaedim、Mirage和Hypothetic。大公司也在關注這個問題,包括Nvidia的Get3D和Autodesk的ClipForge。Kaedim和Get3d專注于圖像到3D模型的轉換;ClipForge和Mirage專注于文本到3D轉換,而Hypothetic公司對文本到3D搜索以及圖像到3D都感興趣。
Kaedim公司:總部在倫敦,主要是通過2D圖像生成3維模型。
Mirage:https://www.mirageml.com/
三維紋理
如果在游戲中,三維模型能夠用在基于網格的紋理或材料上,能夠顯得更加真實。例如,一個中世紀的城堡模型上使用不同類型的、帶有青苔的風化石,可以完全改變一個場景的外觀塑造。這里所說的紋理,包含關于光對材料的反應的元數據,藝術家可以根據文本或圖像提示輕松生成紋理,對于提高創作過程中的迭代速度是非常有價值的,像BariumAI、Ponzu和ArmorLab這樣的公司正在在這個領域努力。
美國參議員呼吁銀行業監管部門審查SoFi的加密數字貨幣業務行動:金色財經報道,美國參議員Sherrod Brown、Jack Reed、Chris Van Holland和 Tina Smith向數字金融公司SoFi和幾家銀行監管機構寫了公開信,要求對 SoFi 的加密產品進行審查。給 SoFi的信表達了對該公司擴大其加密業務、它如何持有客戶的加密貨幣以及它的狗狗幣 (DOGE) 上市的擔憂,該公司網站上的一篇博客文章將其作為“拉高出貨”硬幣的一個例子。
立法者要求SoFi解釋其如何列出待售加密貨幣、如何處理客戶投訴以及如何確定“數字資產風險敞口的適當信用、市場和運營風險資本要求”。[2022/11/22 7:54:13]
BariumAI:https://barium.ai/
Ponzu:https://www.ponzu.gg/
動畫
優秀動畫的制作,是游戲創作過程中最耗時、最昂貴和最有技巧的部分之一,降低成本和創造更為真實的動畫的方法之一,是運用動作捕捉,即給演員或舞者穿上動作捕捉服,用專門的設備,記錄他們的動作。
我們發現,當前的生成式人工智能,可以直接從視頻中捕捉動畫。這就更高效了,因為這樣就不需要成本高昂的的動作捕捉設備,也意味著我們可以從現有視頻中捕捉動畫。
人工智能模型的另一個令人興奮的點在于,可以用于過濾現有動畫,加上新的特效,例如讓動畫人物一鍵看起來喝醉了,或者老了,或者高興。這一領域的公司包括Kinetix、DeepMotion、RADiCAL、MoveAi和Plask。
研究:比特幣開采占全球溫室氣體排放量的 0.1%:金色財經報道,劍橋另類金融中心(CCAF)的一份新報告發現,比特幣開采約占全球溫室氣體排放量的 0.10%。根據報告,這個數字每年相當于 4835 萬噸二氧化碳。根據周二公布的數據,該研究所還估計,該行業使用的能源中有 37.6% 來自可持續資源。這些數字基于 1 月份比特幣開采的地理分布。CCAF 獲取了其最新數據,并將其與有關不同地區發電方式的公共信息相結合。[2022/9/27 22:33:02]
Kinetix
DeepMotion
RADiCAL
關卡設計和游戲世界構建
游戲創作中最耗時的方面之一是構建游戲世界,生成式人工智能可以用于這項任務。像《Minecraft》、《NoMan'sSky》和《Diablo》這樣的游戲,因程序化技術生成關卡而聞名,其中關卡是隨機生成的,每次都不一樣,但都遵循關卡設計者制定的規則。新的ThenewUnreal5游戲引擎的一大賣點在于,它收集了用于開放世界設計的程序化工具,例如葉子的放置。
例如Promethean、MLXAR或Meta的BuilderBot這些公司,都是看到了生成式AI技術的機會。這方面的學術研究已經有一段時間了,包括Minecraft的生成技術或Doom的關卡設計。
為什么生成式人工智能工具具備用于游戲關卡設計的潛力?
因為AI具備創造不同風格的關卡和游戲世界的能力。可以想象一下,通過工具迅速生成一個1920年紙醉金迷時代紐約的游戲世界,或者是神秘的反烏托邦銀翼殺手的設計,或者是托爾金派的幻想世界。
下面的概念是由Midjourney使用提示生成的游戲中不同風格關卡:
音頻
聲音和配樂是游戲體驗的重要部分。已經有公司開始使用生成式人工智能生成音頻,以補充圖形方面的工作。
音效
聲音效果是人工智能的另一個有吸引力的領域。已經有學術論文探討了使用人工智能在電影中生成"foley"的想法,不過目前能夠直接在游戲中應用的商業產品還很少。
筆者認為,這只是一個時間問題,因為游戲的互動性使其成為生成式人工智能的一個明顯的應用,既可以創造靜態的聲音效果作為生產的一部分,也可以在運行時創造實時的互動聲音效果。
想象一下,如何給玩家角色生成腳步聲?大多數傳統游戲,會通過少量預先錄制的腳步聲來解決這個問題:例如,在草地上行走、在礫石上行走、在草地上跑步、在礫石上跑步等等。這些聲音的發布和管理都很繁瑣,而且運行的時候聽起來重復且不真實。
更好的方法是實時通過生成式AI的模擬音效,產生合適且更真實的的音效,通過游戲中的參數,如地面、角色、的重量、步態、鞋類等不同的介質,表現出不同的音效。
音樂
配樂對游戲來說很重要,因為它可以幫助故事主題設定感情基調,就像在電影或電視中一樣。但由于游戲持續的時間更長,有的時候能持續數百甚至數千小時,不變的音樂可能很快變得重復或令玩家厭煩。此外,由于游戲具備互動性質,游戲配樂很難完全精確地配合屏幕上隨機發生的場景和動作。
二十多年來,自適應音樂一直是游戲配樂的一個受關注的話題,它可以一直追溯到微軟的"DirectMusic"系統,用于創建互動音樂。不過,DirectMusic并沒有被廣泛采用,主要是因為用這種格式作曲難度較大,只有少數游戲,如Monolith的《無人生還》,創造了真正的互動配樂。
現在,有許多創業公司正在嘗試創造人工智能生成的音樂,如Soundful、Musico、Harmonai、InfiniteAlbum和Aiva,盡管目前的很多工具,如OpenAI的Jukebox,是高度計算密集型的,還不能實時運行,不過,一旦初始模型成功建立,實時運行將成為可能。
對話&語音
很多公司試圖為游戲中的人物創造逼真的聲音,當然,由于計算機的語音合成歷史悠久,這并不少見,這些公司包括Sonantic、Coqui、ReplicaStudios、Resemble.ai、Readspeaker.ai等等。將生成式人工智能用于語音有多種優勢,當然,這個賽道競爭也比較激烈。
即時對話生成。通常情況下,游戲中的語音是由配音演員預先錄制的,但這些都僅限于死板的演講稿。有了生成式人工智能對話,角色可以說任何話,這就意味著可以對玩家的行為做出充分的反應。
角色扮演。許多玩家希望扮演與自己現實世界身份幾乎沒有相似之處的虛擬人物。然而,只要玩家用自己的聲音說話,這種幻想就會破滅,使用與玩家的化身相匹配的生成的聲音可以保持這種幻覺。
控制音效。通過AI生成語音時,我們可以控制聲音的細微差別,比如它的語調、轉折、情感共鳴、音素長度、口音等等。本地化。對話可以翻譯成任何語言,并以同樣的聲音說話,像Deepdub這樣的公司專門專注于這個細分市場。
NPC&玩家角色
很多初創公司在研究使用生成式人工智能來創建可以互動的角色,除了游戲中NPC的市場機會,虛擬助理或接待員也具備很大的增長空間。這種努力可以追溯到人工智能研究初期。
很多公司正在建立通用聊天機器人,其中許多是由類似于GPT-3的語言模型驅動的。少數公司專門試圖建立以娛樂為目的的聊天機器人,如Replika和Anima,試圖建立虛擬陪伴者。電影《Her》中展現的虛擬女友時代,可能很快就會到來。
現在可以看到這些聊天機器人平臺的下一個迭代,如Charisma.ai、Convai.com或Inworld.ai,除了可以渲染3D角色提供動力外,還具備情感呈現,工具可以讓創造者給這些角色設定目標,可以在融入游戲或在推動情節發展中具有敘事性的地位,而不是純粹的擺設。
一體化平臺
像Runwayml.com這樣最成功的生成式人工智能工具,可以將廣泛的創作者工具集于一身。不過,目前游戲領域還沒有這樣的公司,A16Z很想投資具備以下特點的生成式AI游戲解決方案:
涵蓋整個制作過程的全套生成式人工智能工具:(代碼、資產生成、紋理、音頻等)能夠與流行的游戲引擎如虛幻和Unity結合使用設計成適合典型的游戲生產的通用場景套件工具總結
對于游戲創作者來說,這是一個令人難以置信的時代。有一天,我們可以想象會出現專門為玩家定制的個性化的游戲,完全基于玩家的需求。
這種場景在科幻小說中已經存在了很長時間--比如《安德的游戲》中的"人工智能智力游戲",或者《星際迷航》中的全息甲板,這些都會在將到來的未來真正實現。
參考資料:https://a16z.com/2022/11/17/the-generative-ai-revolution-in-games/公眾號一沙君:史上最全!ConceptArt專業解析賽德大學ConceptArt專業YufeiZhang的分享--2020-02-0418:00
Tags:人工智能ARTCONNCE人工智能幣有哪些ARTEQContents ProtocolDego Finance
1月10日,由MarsBit主辦,香港創新產業園區數碼港、G-Rocket高諾國際加速器、element協辦的「POW’ER香港Web3創新者峰會」在港舉辦.
1900/1/1 0:00:0012月15日,HashKeyCapital發布了2022年DEFI生態全景研報,以下是綜合報道.
1900/1/1 0:00:00"我認為?Mazars?的這種‘暫停’……會產生寒蟬效應,失敗的?FTX?進行過審計這一事實意味著人們開始要求更多保證,現在已發展成為一個非常響亮的呼聲.
1900/1/1 0:00:00根據?PANews?統計,?2022?年全年共有?1660?起投融資事件,資金總量超?348?億美元.
1900/1/1 0:00:00摘要 -“Notyourkey,notyourcoin”,無論智能合約錢包還是個人賬戶錢包,私鑰都擁有對錢包的絕對控制權,一旦私鑰丟失我們的錢包就完全暴露在風險之下-私鑰是錢包的基礎.
1900/1/1 0:00:00注:本文來自@TheDeFISaint推特,MarsBit整理如下:L1區塊鏈擴展解決方案的快速總結。提升你的L2體驗.
1900/1/1 0:00:00