A16Z最近寫了一篇很有意思的文章,談到他們認為的生成式AI和游戲結合在一起的機會在哪,筆者翻譯后對部分內容進行了注解。文章第一部分已經發出,見:《a16z:生成式AI在游戲領域的觀察與預測》,本篇為第二部分,包括A16Z對游戲+生成式AI領域的市場生態的判斷。市場生態概述
下圖為整體的市場生態情況,描述了A16Z在各個類別中發現的創業公司,在這些具體的項目中,我們看發現了生成式人工智能對游戲的影響,本篇會對每個類別中最有特點的公司和機會進行介紹。
用文本生成平面圖像
從文本提示中生成2D圖像,已生成式人工智能最為廣泛的應用領域之一。諸如Midjourney、StableDiffusion和Dall-E2這樣的工具,直接可以將文本描述生成高質量的二維圖像,并且它們用在了游戲開發和制作的整個生命周期的多個階段。概念藝術
,對過去的方式進行革新甚至是顛覆,創造出全新的造型角色或者概念。和插畫有什么區別?插畫家與游戲的關系更多的是幫其繪制海報、包裝封面等。而與影視、游戲開發的工作真正緊密相關的2D藝術工作之一就是我們所說的ConceptArt。和漫畫有什么區別?ConceptArt跟漫畫有很大區別,漫畫是日本一個獨立的體系,更多服務于熱門的輕小說的視覺化。而概念藝術則是服務于游戲,動畫,在風格上表現形式上不受限制,創造出一些超前的,或者是完整的一套設定顯得極為重要。和原畫有什么區別?ConceptArt幾乎包括所有的角色,場景塑造,跟原畫師不同的地方是,概念設計師必須要主動產出一些更有趣的設計。ConceptArt區別于原畫師,在游戲,動畫項目中扮演一個僅次于主策劃的一個美術向的決策地位,決定這個項目的風格和受眾,因此一個以概念藝術家為目標的畫師,被一種畫風禁錮是不稱職的。)參考資料:公眾號一沙君:史上最全!ConceptArt專業解析賽德大學ConceptArt專業YufeiZhang的分享--2020-02-0418:00生成式人工智能工具,在幫助像游戲設計師這樣的角色進行游戲概念探索與靈感啟發都比較有用處。這也是生產過程的一個關鍵環節,例如,某個游戲工作室正在使用上述工具,從根本上加快了他們的概念藝術的開發流程,因為他們只用了一天時間就創造出了一個圖像,而在以前,這個過程需要長達3周的時間,但是具體怎么操作呢?首先,游戲設計師使用Midjourney來探索不同的靈感,并生成他們認為合適的概念圖像。之后,圖像會被交給專業的概念藝術家,藝術家可以把這些圖像組合在一起,然后創建一個相關主題的連貫圖像,然后將這些圖片輸入StableDiffusion,以形成系列的圖像變化。大家會共同討論這些風格各異的圖像風格,然后確定一個,用畫筆手動編輯,然后繼續重復以上過程,直到大家對作品結果感到滿意。在這個階段,再把這個圖像最后上傳給StableDiffusion,創造出最后的藝術作品。2DProductionArt
a16z CTO:“橙球”謎語推文并非是要推出L2:4月19日消息,a16z 首席技術官 Eddy Lazzarin 回應 a16z 工程師 ncitron.eth 發布的“橙色圓球”即將推出謎語推文稱,這并非 L2。a16z 工程師 ncitron.eth 發布橙球推文后,與 Optimism 圖像的相似性導致交易者猜測 a16z 可能計劃推出自己的 Layer2 區塊鏈,OP Token 此后上漲 3%。
此前報道,Coinbase 于 2 月份發布包含藍色圓球的推文,并基于 OP Stack 構建了一個全新 L2 區塊鏈 Base。(CoinDesk )[2023/4/19 14:12:34]
還有的游戲工作室在嘗試使用類似的人工智能工具來制作游戲中的美術作品。例如,下圖是來自AlbertBozesan,關于如何使用StableDiffusion來創建游戲中的2D資產的教程。
來源:https://www.youtube.com/watch?v=blXnuyVgA_Y3DArtwork
3D立體模塊,是目前所有現代游戲以及即將到來元宇宙的重要構建源。虛擬世界和游戲關卡,本質上都是一個3D資產的集合,通過不同的組合和放置方法,修改不同的參數來填充游戲環境。而創建3D元素比創建2D平面圖更為復雜,涉及多個步驟,包括需要制作3D模型、添加紋理和效果。而對于動畫人物來說,還涉及到需要創建一個內部「輪廓」,然后在輪廓之上創建動畫。我們發現有不同的初創公司,在尋找有關3D資產創建過程的各個階段的機會,包括模型創建、角色動畫和關卡制作等等。然而,這部分的業務和創新尚在探索中。三維資產
a16z生物+健康基金與Bassett合作利用數字醫療技術:金色財經報道,Andreessen Horowitz(a16z)生物+健康基金今天宣布與紐約州中部的綜合醫療保健系統Bassett Healthcare Network建立戰略合作伙伴關系。這項合作旨在利用a16z投資組合公司的數字醫療技術,通過Bassett Healthcare Network解決向農村患者群體提供高質量醫療服務的不平等和系統性挑戰。Bassett醫療集團和a16z已經為這種合作關系成立了一個執行委員會,以探索創新技術和平臺,調整優先事項,并監督相關技術改造的實施。(businesswire)[2022/11/8 12:30:19]
試圖往創建3D模型方向發展的初創公司包括Kaedim、Mirage和Hypothetic。大公司也在關注這個問題,包括Nvidia的Get3D和Autodesk的ClipForge。Kaedim和Get3d專注于圖像到3D模型的轉換;ClipForge和Mirage專注于文本到3D轉換,而Hypothetic公司對文本到3D搜索以及圖像到3D都感興趣。
Kaedim公司:總部在倫敦,主要是通過2D圖像生成3維模型。
Mirage:https://www.mirageml.com/三維紋理
a16z推出規模達45億美元的第四支加密基金:5月25日消息,a16z推出規模達45億美元的第四支加密基金Crypto Fund 4,其中約15億美元將用于種子投資,30億美元將用于風險投資,這使得其籌集的加密資金總額超過76億美元。
a16z將用這些資金在每個融資階段投資于有前途的Web3初創公司,目前對Web3游戲、DeFi、去中心化社交媒體、自我主權身份、Layer1和Layer2基礎設施、橋、DAO和治理、NFT社區、隱私、創造者經濟、可再生金融、ZK證明的新應用、去中心化內容和故事創作以及許多其他領域的發展感到興奮。
a16z還將繼續發展運營團隊,以便繼續為創始人提供最好的服務,其中運營職能包括研究和工程、安全性、人才管理、法律和監管、市場拓展。[2022/5/25 3:41:19]
如果在游戲中,三維模型能夠用在基于網格的紋理或材料上,能夠顯得更加真實。例如,一個中世紀的城堡模型上使用不同類型的、帶有青苔的風化石,可以完全改變一個場景的外觀塑造。這里所說的紋理,包含關于光對材料的反應的元數據,藝術家可以根據文本或圖像提示輕松生成紋理,對于提高創作過程中的迭代速度是非常有價值的,像BariumAI、Ponzu和ArmorLab這樣的公司正在在這個領域努力。
BariumAI:https://barium.ai/
a16z合伙人Chris Dixon:市場上過半尋求融資的初創公司與加密相關:5月17日消息,a16z合伙人Chris Dixon在Permissionless大會上發言表示,目前超過一半在市場上尋找資金的初創公司與加密貨幣相關。[2022/5/17 3:23:00]
Ponzu:https://www.ponzu.gg/動畫
優秀動畫的制作,是游戲創作過程中最耗時、最昂貴和最有技巧的部分之一,降低成本和創造更為真實的動畫的方法之一,是運用動作捕捉,即給演員或舞者穿上動作捕捉服,用專門的設備,記錄他們的動作。我們發現,當前的生成式人工智能,可以直接從視頻中捕捉動畫。這就更高效了,因為這樣就不需要成本高昂的的動作捕捉設備,也意味著我們可以從現有視頻中捕捉動畫。人工智能模型的另一個令人興奮的點在于,可以用于過濾現有動畫,加上新的特效,例如讓動畫人物一鍵看起來喝醉了,或者老了,或者高興。這一領域的公司包括Kinetix、DeepMotion、RADiCAL、MoveAi和Plask。
Kinetix
DeepMotion
PayPal和a16z等將指導Celo區塊鏈創業訓練營:金色財經報道,Celo正在運行為期八周的區塊鏈創業訓練營。Celo基金會已選出18位決賽入圍者,每位決賽入圍者都將獲得來自PayPal、Winklevoss Capital、PayPal等其他組織的指導。獲勝的初創公司還將獲得10000美元的現金獎勵。[2020/4/22]
RADiCAL關卡設計和游戲世界構建游戲創作中最耗時的方面之一是構建游戲世界,生成式人工智能可以用于這項任務。像《Minecraft》、《NoMan'sSky》和《Diablo》這樣的游戲,因程序化技術生成關卡而聞名,其中關卡是隨機生成的,每次都不一樣,但都遵循關卡設計者制定的規則。新的ThenewUnreal5游戲引擎的一大賣點在于,它收集了用于開放世界設計的程序化工具,例如葉子的放置。例如Promethean、MLXAR或Meta的BuilderBot這些公司,都是看到了生成式AI技術的機會。這方面的學術研究已經有一段時間了,包括Minecraft的生成技術或Doom的關卡設計。為什么生成式人工智能工具具備用于游戲關卡設計的潛力?因為AI具備創造不同風格的關卡和游戲世界的能力。可以想象一下,通過工具迅速生成一個1920年紙醉金迷時代紐約的游戲世界,或者是神秘的反烏托邦銀翼殺手的設計,或者是托爾金派的幻想世界。下面的概念是由Midjourney使用提示生成的游戲中不同風格關卡:
音頻
聲音和配樂是游戲體驗的重要部分。已經有公司開始使用生成式人工智能生成音頻,以補充圖形方面的工作。音效
聲音效果是人工智能的另一個有吸引力的領域。已經有學術論文探討了使用人工智能在電影中生成「foley」的想法,不過目前能夠直接在游戲中應用的商業產品還很少。筆者認為,這只是一個時間問題,因為游戲的互動性使其成為生成式人工智能的一個明顯的應用,既可以創造靜態的聲音效果作為生產的一部分,也可以在運行時創造實時的互動聲音效果。想象一下,如何給玩家角色生成腳步聲?大多數傳統游戲,會通過少量預先錄制的腳步聲來解決這個問題:例如,在草地上行走、在礫石上行走、在草地上跑步、在礫石上跑步等等。這些聲音的發布和管理都很繁瑣,而且運行的時候聽起來重復且不真實。更好的方法是實時通過生成式AI的模擬音效,產生合適且更真實的的音效,通過游戲中的參數,如地面、角色、的重量、步態、鞋類等不同的介質,表現出不同的音效。音樂
配樂對游戲來說很重要,因為它可以幫助故事主題設定感情基調,就像在電影或電視中一樣。但由于游戲持續的時間更長,有的時候能持續數百甚至數千小時,不變的音樂可能很快變得重復或令玩家厭煩。此外,由于游戲具備互動性質,游戲配樂很難完全精確地配合屏幕上隨機發生的場景和動作。二十多年來,自適應音樂一直是游戲配樂的一個受關注的話題,它可以一直追溯到微軟的「DirectMusic」系統,用于創建互動音樂。不過,DirectMusic并沒有被廣泛采用,主要是因為用這種格式作曲難度較大,只有少數游戲,如Monolith的《無人生還》,創造了真正的互動配樂。現在,有許多創業公司正在嘗試創造人工智能生成的音樂,如Soundful、Musico、Harmonai、InfiniteAlbum和Aiva,盡管目前的很多工具,如OpenAI的Jukebox,是高度計算密集型的,還不能實時運行,不過,一旦初始模型成功建立,實時運行將成為可能。對話&語音
很多公司試圖為游戲中的人物創造逼真的聲音,當然,由于計算機的語音合成歷史悠久,這并不少見,這些公司包括Sonantic、Coqui、ReplicaStudios、Resemble.ai、Readspeaker.ai等等。將生成式人工智能用于語音有多種優勢,當然,這個賽道競爭也比較激烈。即時對話生成。通常情況下,游戲中的語音是由配音演員預先錄制的,但這些都僅限于死板的演講稿。有了生成式人工智能對話,角色可以說任何話,這就意味著可以對玩家的行為做出充分的反應。角色扮演。許多玩家希望扮演與自己現實世界身份幾乎沒有相似之處的虛擬人物。然而,只要玩家用自己的聲音說話,這種幻想就會破滅,使用與玩家的化身相匹配的生成的聲音可以保持這種幻覺。控制音效。通過AI生成語音時,我們可以控制聲音的細微差別,比如它的語調、轉折、情感共鳴、音素長度、口音等等。本地化。對話可以翻譯成任何語言,并以同樣的聲音說話,像Deepdub這樣的公司專門專注于這個細分市場。NPC&玩家角色
很多初創公司在研究使用生成式人工智能來創建可以互動的角色,除了游戲中NPC的市場機會,虛擬助理或接待員也具備很大的增長空間。這種努力可以追溯到人工智能研究初期。很多公司正在建立通用聊天機器人,其中許多是由類似于GPT-3的語言模型驅動的。少數公司專門試圖建立以娛樂為目的的聊天機器人,如Replika和Anima,試圖建立虛擬陪伴者。電影《Her》中展現的虛擬女友時代,可能很快就會到來。現在可以看到這些聊天機器人平臺的下一個迭代,如Charisma.ai、Convai.com或Inworld.ai,除了可以渲染3D角色提供動力外,還具備情感呈現,工具可以讓創造者給這些角色設定目標,可以在融入游戲或在推動情節發展中具有敘事性的地位,而不是純粹的擺設。一體化平臺
像Runwayml.com這樣最成功的生成式人工智能工具,可以將廣泛的創作者工具集于一身。不過,目前游戲領域還沒有這樣的公司,A16Z很想投資具備以下特點的生成式AI游戲解決方案:涵蓋整個制作過程的全套生成式人工智能工具:(代碼、資產生成、紋理、音頻等)能夠與流行的游戲引擎如虛幻和Unity結合使用設計成適合典型的游戲生產的通用場景套件工具總結
對于游戲創作者來說,這是一個令人難以置信的時代。有一天,我們可以想象會出現專門為玩家定制的個性化的游戲,完全基于玩家的需求。這種場景在科幻小說中已經存在了很長時間--比如《安德的游戲》中的「人工智能智力游戲」,或者《星際迷航》中的全息甲板,這些都會在將到來的未來真正實現。原地址
加密貨幣誕生于重新發明貨幣并將其以分散的方式耦合到數字環境的想法。如果沒有實體干預其價值,它的價值將完全由公正的供求規律賦予.
1900/1/1 0:00:00二十多年前,音樂傳輸的媒介主要是磁帶;十多年前,除了電影院,消費者宅家看電影主要是靠光碟。現在磁帶和光碟從我們的選項中基本消失,取而代之的是流媒體——即媒體數據被壓縮后,以流的方式通過網絡傳送,
1900/1/1 0:00:00Zkrollups是加密領域最有前途的創新之一,但很容易與最近出現的新解決方案混淆。因此,本文將對一些最著名的Zkrollup協議進行可視化介紹.
1900/1/1 0:00:00原文作者:元宇宙之心、歐易研究院概述在國內,元宇宙一詞自2021年登頂「漢語盤點2021」和「十大網絡用語」后,2022年逐步從大眾熟悉的「吃瓜」領域過渡到了應用階段.
1900/1/1 0:00:00Odaily星球日報譯者|念銀思唐紐約梅隆銀行計劃今年裁員約1500人,這家美國銀行表示,成本將是2023年的首要考慮事項.
1900/1/1 0:00:00以下是a16z今年冬天正在閱讀的一些書籍和正在玩的游戲,內容涉及潛水、半導體和間諜......而且大多是小說.
1900/1/1 0:00:00