上周,OpenAI 大型語言模型 GPT-4 一經公布便引發了全球科技圈與媒體的關注,60秒創建出一款小游戲,將一張草圖快速變為功能性的網站,完美通過歷史、數學等幾乎所有的學科考試,檢查代碼漏洞等等,各種逆天的功能展示它極為強大的能力,可以說,GPT-4 成為了在知識、技能、邏輯領域的全能人才,比以往的任何 AI 都要強大,而這一款瘋狂的產品或將預示著 AI 奇點的到來。
GPT-4與GPT-3.5各項考試成績對比
在 AI 開始不斷刷新人們認知的同時,另一個更為底層的領域也同樣發生著巨變,那就是算力。眾所周知,AI 模型都需要消化大規模的數據,同時也需要消耗更為龐大的算力,諸如圖像識別、自然語言處理和機器學習等各種AI應用和模型的訓練,都依賴于龐大算力的加持。
Hedera網絡的ChatGPT插件上線,用戶可以通過Network Explorer查看帳戶余額:金色財經報道,Network Explorer開發人員EdMarquez表示,用戶可以通過Network Explorer查看帳戶余額,或通過插件將使用的鏡像節點RESTAPI以編程方式檢索帳戶余額。通過使用插件,ChatGPT與Hedera網絡的集成允許從Hedera賬戶檢索HBAR和代幣余額。[2023/6/25 21:59:21]
據 OpenAl 此前發布的數據顯示,從2012年到2020年,其算力消耗平均每3.4個月就翻倍一次,8年間算力增長了三十萬倍,更不用談自去年 ChatGPT 推出后爆火所帶來的需求暴漲。
此外,AI 時代算力的增長也遠遠超過了摩爾定律每18個月翻番的速率,根據中國信息通信研究院的估算,2021年全球超算算力規模大約為14EFlops,預測到2030年全球超算算力將達到0.2ZFlops,平均年增速超過34%。AI 的奇點的到來也將會成就算力領域的黃金時代,同時,算力的發展好壞也將會影響著其未來的發展,兩者彼此成就。
RSS3研發的“Web3 User Activity”插件在ChatGPT商店中上線:6月21日消息,RSS3團隊宣布,由他們研發的一款名為“Web3 User Activity”的插件已經在ChatGPT商店中正式上線。“Web3 User Activity”插件搜集整合鏈上信息,并提供給ChatGPT。這一行動彌補了AI領域中Web3數據的缺失,使ChatGPT用戶能夠訪問到更加全面的鏈上內容。[2023/6/21 21:51:41]
OpenAl算力消耗情況 數據來源:阿里研究院《數實融合的第三次浪潮》
目前,關于 AI 算力的優化技術主要有以下幾種:
歐盟草案:版權方或能從ChatGPT生成的內容中獲利:金色財經報道,根據新的歐盟立法草案文本,AI服務提供商將被要求披露用于構建系統的版權材料。草案文本寫道,生成AI模型的開發者必須公布他們所使用版權材料的“足夠詳細的匯總”。這意味著,當出版商和內容創作者的作品成為AI生成內容的材料時,他們可以依據這項擬議的法案條例獲得利潤。這也是自聊天機器人ChatGPT公布以來,歐盟方面最關注的商業問題之一。據了解,開發商在訓練大語言模型時需要攝取網絡上數十億的文本、圖像、視頻、音樂、代碼等,才能使模型導出營銷文案、新的圖像或新的歌曲。[2023/4/28 14:31:38]
GPU資源池化:通過虛擬化和遠程調用,將GPU從硬件定義轉換成軟件定義的資源池,實現資源的共享、按需分配、彈性伸縮和統一管理。
計算精度優化:通過混合精度計算,利用不同的浮點數類型在保證模型訓練和推理效果的同時,降低數據傳輸和存儲成本。
NFT項目Onlybots開發商計劃將ChatGPT技術集成至Onlybots NFT中:2月10日消息,ARNFT項目Onlybots開發商Anima計劃將ChatGPT技術集成至Onlybots NFT中,以使得每個Onlybots NFT都可以與用戶進行語言交流。此前報道,2022年12月15日,Anima完成300萬美元融資,Polygon Studios、Not Boring Capital、HashKey等領投。
Onlybots是一個基于以太坊的虛擬寵物NFT,Anima聯合創始人Alex Herrity表示,每個Onlybots都附有GPS坐標,可以通過智能手機攝像頭查看,NFT持有者可以將數字生物疊加在物理世界中。[2023/2/10 11:58:33]
模型壓縮優化:通過參數剪枝、量化等方法,減少模型參數量和計算復雜度,降低模型大小和內存占用。
面對算力需求的增長,短期內可以從軟硬件和工程優化等角度解決,但在未來十年,二十年之后呢?當芯片逼近量子極限,當 AI 的進化需要越來越龐大的數據、越來越多的預訓練模型參數、越來越高的算法精度時,會帶來對算力需求的指數級增長,而且這種增長是長期性的,由此帶來的成本問題將會成為一個不可規避的難題。同時這也會讓 AI 只有巨頭才能入局的游戲,據悉,OpenAI 接受微軟投資的很大原因就是為了獲得微軟云 Azure 的計算支持。
所以,為了能降低成本,并獲得更多的算力來支持 AI 項目的進一步發展,很多新興企只能選擇與大型云算力企業合作,作為交換讓渡出部分權利,而去中心化的算力系統或許能在一定程度上解決這一問題,并降低 AI 模型訓練的門檻。
去中心化算力是指將分散在不同地點、不同設備上的計算資源整合起來,形成一個去中心化的網絡。以此,為 AI 應用提供更加靈活、高效、低成本的計算服務,其潛在優勢體現以下幾個方面:
提供分布式計算能力,支持人工智能模型的訓練和運行,使任何人都能運行AI模型,并在來自全球用戶的真實鏈上數據集上進行測試。
去中心化還可以通過創建一個強大的框架來解決隱私問題。
通過提供透明、可驗證的計算過程,增強人工智能模型的可信度和可靠性。
通過提供靈活、可擴展的計算資源,支持人工智能模型在各種應用場景下快速部署和運行。
提供去中心化的數據存儲和管理方案。
目前,已經有項目在探索以去中心算力+AI的組合,例如:
Gensyn:該協議通過智能合約方式促進機器學習(ML)的任務分配和獎勵,來快速實現 AI 模型的學習能力,適用于深度學習計算的L1層,可以在大規模、低成本的網絡中實現 ML。
Flux:一個基于區塊鏈技術的去中心化 AI 平臺,通過智能合約來規范 AI 任務的發布、執行和驗證過程,并使用 Token 作為激勵機制。
Golem:一個提供算力市場的點對點去中心化計算網絡,支持任何人都可以通過創建共享資源的網絡來共享和聚合計算資源。
但去中心化算力網絡與 AI 的結合也需要解決驗證問題,即如何確保運算結果的正確性和可信性。此外,算力增長所帶來的電力消耗也是一個不可忽視的問題,據統計,訓練 GPT-3 模型消耗的能源相當于120個美國家庭一年的耗電量,而這只是實際使用模型所消耗的電力的40%左右。
相比算力增長來說,能源電力稱不上難題,隨著技術的突破,AI 所展現出的潛力將會激發了更多的企業和研究機構投身其中,這些問題可能會被一一解決。而從計算機視覺到自然語言處理,從機器人學到推理、搜索,人工智能所帶來的生產力變革正在改變我們當前的工作方式,在技術發展的道路上,科幻照進現實只是時間問題。
來源:DeFi之道
DeFi之道
個人專欄
閱讀更多
金色財經 善歐巴
金色早8點
白話區塊鏈
Odaily星球日報
MarsBit
歐科云鏈
深潮TechFlow
Arcane Labs
BTCStudy
Tags:GPTHATCHATATGarbgpt幣團隊bchat幣聊下載人工智能chatGPT下載BABYCATGIRL
從哪里開始呢?就從加密領域最令人期待的空投ARB說起吧。真正的信徒早早就預言了這一天;而悲觀主義者卻說它永遠不會到來!現在就是獲取ARB收益的時候.
1900/1/1 0:00:00隨著金融、娛樂、社交等行業版圖開始邁入 Web3 時代,區塊鏈正在改變當下行業發展的現狀,帶動各領域事業追求開放、透明、去中心化的未來.
1900/1/1 0:00:00原文:《GMX 的挑戰者們》出品:DODO Research 編輯:Lisa 作者:Flamie 自 22 年 GMX 代幣上線幣安后,GMX 的各項數據接連創下新高.
1900/1/1 0:00:00事件 北京時間3月10日凌晨,硅谷銀行(SVB,Silicon Valley Bank)宣布大規模再融資引發市場擔心其流動性和資產負債表狀況,股價跌超60%,進而波及整個美國銀行板塊和美股市場.
1900/1/1 0:00:00ZK領域頭部專家在本文中分享了零知識證明協議在機制設計和工程建構上的安全原則與新穎方案,以及在設計過程中的種種權衡.
1900/1/1 0:00:00文章來源:Bankless 翻譯:金色財經 不,你的眼睛沒有欺騙你。這不是一場演習。終于,ARB來了.
1900/1/1 0:00:00