原文:《AN INTRODUCTION TO ZERO-KNOWLEDGE MACHINE LEARNING (ZKML)》by dcbuilder.eth, Worldcoin
編譯:深潮 TechFlow
Zero-Knowledge 機器學習(ZKML)是最近正在密碼學界引起轟動的一個研究和開發領域。但它是什么,有什么用處呢?首先,讓我們把這個術語分解成它的兩個組成部分,并解釋一下它們是什么。
零知識證明是一種密碼協議,其中一方(證明者)可以向另一方(驗證者)證明一個給定的陳述是真實的,而不泄露除該陳述為真以外的任何附加信息。這是一個正在各個方面取得巨大進展的研究領域,涵蓋了從研究到協議實施和應用的所有方面。
ZK 提供的兩個主要“原語”(或者說構建塊)是能夠為一組給定的計算創建具有計算完整性證明的能力,其中證明比執行計算本身要容易地多。(我們稱這種屬性為“簡潔性”)。ZK 證明也提供了隱藏計算中某些部分同時保持計算正確性的選項。(我們稱這種屬性為“零知識性”)。
生成零知識證明需要非常大的計算量,大約比原始計算貴 100 倍。這意味著,在某些情況下由于最佳硬件上生成它們所需的時間使其不切實際,因此不能計算零知識證明。
聲音 | 密碼學博士高承實:央行數字貨幣發行內容的明確和待明確:8月12日,密碼學博士高承實博客發文《央行數字貨幣發行內容的明確和待明確》,文中指出央行數字貨幣發行已經明確的內容包括:1.央行數字貨幣發行采用雙層運營體系;2. 堅持中心化的管理模式 ; 3. 重點是M0替代,而不是M1/M2替代;4. 采用100%準備金制 5. 不采用純區塊鏈架構。央行數字貨幣發行待明確的內容包括:1. 雙層體系如何運營? 2. 實行哪種中心化管理?3. 如何做到賬戶松耦合?
此外,他還指出央行數字貨幣體系注重M0替代,在管理機制和技術實現上面臨著如何實現央行數字貨幣與原電子貨幣系統的整合問題。而且如何做到二者有機協調、互相借鑒、取長補短,并最終形成完整統一的央行數字貨幣體系,也是需要關注的問題。[2019/8/13]
然而,在近年來密碼學、硬件和分布式系統領域的進步已經使零知識證明成為了越來越強大的計算可行的選擇。這些進展已經為可以使用計算密集型證明的協議的創建提供了可能,從而擴大了新應用程序的設計空間。
零知識密碼學是 Web3 空間中最流行的技術之一,因為它允許開發人員構建可擴展和/或私有的應用程序。以下是一些實踐中如何使用它的示例(盡管請注意,這些項目中許多都還在進行中):
1.通過 ZK rollups 擴展以太坊
聲音 | 現代密碼學之父:不太清楚區塊鏈未來的發展:據國是直通車消息,近日,“現代密碼學之父”Whitfield Diffie接受采訪時表示,“我們是否以后回顧當前區塊鏈的發展,就像現在回顧20年以前萬維網的這種作用一樣,我不知道。決定區塊鏈未來還有一個因素,即它是會變成一個小眾人群、專業人士使用的工具,還是大眾都使用的工具,這一點我也不清楚,但這都是影響因素。”[2019/4/4]
Starknet
Scroll
Polygon Zero,Polygon Miden,Polygon zkEVM
zkSync
2.構建保護隱私的應用程序
Semaphore
MACI
Penumbra
Aztec Network
3.身份原語和數據來源
WorldID
Sismo
Clique
Axiom
4.第一層協議
Zcash
Mina
隨著 ZK 技術的成熟,我們相信將會出現新的應用程序的爆發,因為構建這些應用程序所使用的工具將需要更少的領域專業知識,對于開發人員來說將會更加容易使用。
聲音 | 楊慶峰:現代密碼學結合區塊鏈技術可基本消除技術層面的安全問題:據澎湃新聞消息,上海大學哲學系教授楊慶峰發文指出,如果說長三角一體化建設過程中數據共享會成為一個問題,數據共享會影響到未來長三角一體化公共服務的落實,那么這個問題就必須嚴肅對待。同時,其表示現代密碼學的方法已完全可以解決這一問題,再加上區塊鏈技術的未來運用的可能性極大,這基本上消除技術層面出現的安全問題。需要擔憂的是倫理方面的問題,諸如隱私保護、被遺忘權等方面的問題。[2019/3/14]
機器學習是人工智能(“AI”)領域的一個研究方向,使得計算機可以自動從經驗中學習和改進,無需明確地進行編程。它利用算法和統計模型來分析和識別數據中的模式,然后基于這些模式進行預測或決策。機器學習的最終目標是開發出能夠自適應學習、不需要人類干預以及在醫療保健、金融和交通等各個領域解決復雜問題的智能系統。
最近,您可能已經看到了大型語言模型(如 chatGPT 和 Bard)以及文本到圖像的模型(如 DALL-E 2、Midjourney 或 Stable Diffusion)的進展。隨著這些模型變得越來越好,并且能夠執行更廣泛的任務,了解是哪個模型執行了這些操作就變得非常重要,還是操作由人類執行。在接下來的部分中,我們將探討這個思路。
聲音 | 上海交通大學來學嘉:區塊鏈為密碼學創造了價值:據巴比特消息,上海交通大學教授來學嘉在接受采訪時提到了區塊鏈對密碼學的兩大貢獻。第一大貢獻是為抗抵賴、抗捏造提供了完整的解決方案。區塊鏈能做到抗抵賴,是因為區塊鏈本身就是第三方,參與者自覺服從,數字簽名為抗抵賴提供證據。另外,他還指出了區塊鏈對密碼學的另一個貢獻——區塊鏈為密碼學創造了價值,過去的密碼學是“賠錢”的,因為要用于保護信息系統的安全,增加了開銷;有了區塊鏈后,現在的密碼學是“值錢”的,因為密碼算法的計算結果(coin)具有價值,另外算法本身也具有價值,比如勒索軟件,你要付錢才能解開。[2019/2/25]
注:當我們談論 ZKML 時,我們是指創建 ML 模型推理步驟的零知識證明,而不是關于 ML 模型訓練(它本身已經非常計算密集)。目前,現有技術水平的零知識系統加上高性能硬件仍然相差幾個數量級,無法證明當前可用的大型語言模型(LLMs)等龐大的模型,但是在創建較小模型的證明方面已經取得了一些進展。
我們對零知識密碼學在為 ML 模型創建證明的上下文中的現有技術水平進行了一些研究,并創建了一個聚合相關研究、文章、應用程序和代碼庫的文章集。ZKML 的資源可以在 GitHub 上的 ZKML 社區的 awesome-zkml 存儲庫中找到。
斯坦福大學應用密碼學租開發“防彈比特幣”技術:斯坦福大學的應用密碼學組織(ACG)提出一種名為“防彈比特幣”的技術,可以大幅降低區塊鏈數據的大小。ACG團隊稱該技術可以減小交易密碼證明區塊的大小,從原來的10kB縮小到小于1kB,目的在于增強比特幣的保密性,并提高交易速度。[2017/11/20]
Modulus Labs 團隊最近發布了一篇名為“智能的成本”的論文,其中對現有的 ZK 證明系統進行了基準測試,并列舉了不同大小的多個模型。目前,使用像 plonky2 這樣的證明系統,在強大的 AWS 機器上運行 50 秒左右,可以為約 1800 萬個參數的模型創建證明。以下是該論文中的一張圖表:
另一個旨在改進 ZKML 系統技術水平的倡議是 Zkonduit 的 ezkl 庫,它允許您創建對使用 ONNX 導出的 ML 模型的 ZK 證明。這使得任何 ML 工程師都能夠為他們的模型的推理步驟創建 ZK 證明,并向任何正確實現的驗證器證明輸出。
有幾個團隊正在改進 ZK 技術,為 ZK 證明內部發生的操作創建優化硬件,并針對特定用例構建這些協議的優化實現。隨著技術的成熟,更大的模型將在較不強大的機器上短時間內進行 ZK 證明。我們希望這些進展將使新的 ZKML 應用程序和用例得以出現。
潛在的使用案例
為了確定 ZKML 是否適用于特定的應用,我們可以考慮 ZK 密碼學的特性將如何解決與機器學習相關的問題。這可以用一個 Venn 圖來說明:
定義:
1.Heuristic optimization—— 一種問題解決方法,它使用經驗法則或“啟發式”來找到艱難的問題的好解決方案,而不是使用傳統的優化方法。啟發式優化方法旨在在相對的重要性和優化難度下,在合理的時間內找到好的或“足夠好”的解決方案,而不是嘗試找到最優解決方案。
2.FHE ML —— 完全同態加密ML允許開發人員以保護隱私的方式訓練和評估模型;然而,與ZK證明不同,沒有辦法通過密碼學方式證明所執行的計算的正確性。
像 Zama.ai 這樣的團隊正在從事這個領域的工作。
3.ZK vs Validity —— 在行業中,這些術語通常被互換使用,因為有效性證明是ZK證明,不會隱藏計算或其結果的某些部分。在ZKML的上下文中,大多數當前的應用程序都利用了ZK證明的有效性證明方面。
4.Validity ML —— ZK證明ML模型,在其中沒有計算或結果被保密。它們證明計算的正確性。
以下是一些潛在的 ZKML 用例示例:
1.計算完整性(有效性 ML)
Modulus Labs
基于鏈上可驗證的 ML 交易機器人 - RockyBot
自我改進視覺區塊鏈(示例):
增強 Lyra 金融期權協議 AMM 的智能特性
為 Astraly 創建透明的基于 AI 的聲譽系統(ZK oracle)
使用 ML for Aztec Protocol(具有隱私功能的 zk-rollup)致力于合同級合規工具所需的技術突破。
2.機器學習即服務(MLaaS) 透明;
3.ZK 異常/欺詐檢測:
這種應用場景使得可創建針對可利用性/欺詐的 ZK 證明成為可能。異常檢測模型可以在智能合約數據上進行訓練,并由 DAOs 同意作為有趣的度量標準,以便能夠自動化安全程序,如更主動、預防性地暫停合約。已有初創企業正在研究在智能合約環境中使用 ML 模型進行安全目的的方法,因此 ZK 異常檢測證明似乎是自然的下一步。
4.ML 推理的通用有效性證明:能夠輕松證明和驗證輸出是給定模型和輸入對的乘積。
5.隱私 (ZKML)。
6.去中心化的 Kaggle:證明模型在某些測試數據上的準確率大于 x%,而不會顯示權重。
7.隱私保護推理:將對私人患者數據的醫療診斷輸入模型,并將敏感的推理(例如,癌癥測試結果)發送給患者。
8.Worldcoin:
IrisCode 的可升級性:World ID 用戶將能夠在他們的移動設備的加密存儲中自我保管其生物特征,下載用于生成 IrisCode 的 ML 模型并在本地創建零知識證明,以證明其 IrisCode 已成功創建。這個 IrisCode 可以被無需許可地插入注冊的 Worldcoin 用戶之一,因為接收的智能合約可以驗證零知識證明,從而驗證 IrisCode 的創建。這意味著,如果 Worldcoin 將來升級機器學習模型以一種破壞與其之前版本兼容性的方式創建 IrisCode,用戶就不必再次去 Orb,而可以在設備上本地創建這個零知識證明。
Orb 安全性:目前,Orb 在其受信任的環境中執行幾個欺詐和篡改檢測機制。然而,我們可以創建一個零知識證明,表明這些機制在拍攝圖像和生成 IrisCode 時是活動的,以便為 Worldcoin 協議提供更好的活體保證,因為我們可以完全確定這些機制在整個 IrisCode 生成過程中都將運行。
總之,ZKML 技術有著廣泛的應用前景,并且正在快速發展。隨著越來越多的團隊和個人加入到這個領域,我們相信 ZKML 的應用場景將會更加多樣化和廣泛化。
深潮TechFlow
個人專欄
閱讀更多
金色財經 善歐巴
金色早8點
白話區塊鏈
Odaily星球日報
Arcane Labs
歐科云鏈
MarsBit
BTCStudy
鏈得得
編輯:Bowen@Web3CN.ProEigenLayer發布第一階段測試網4月7日消息,以太坊再質押協議EigenLayer在博客文章中宣布,其已發布EigenLayer協議第一階段測試網.
1900/1/1 0:00:00原文作者:西柚,ChainCatcher3 天內,Avalanche鏈上出現兩次停止出塊 60 分鐘以上的狀況.
1900/1/1 0:00:00金色周刊是金色財經推出的一檔每周區塊鏈行業總結欄目,內容涵蓋一周重點新聞、礦業信息、項目動態、技術進展等行業動態。本文是其中的新聞周刊,帶您一覽本周區塊鏈行業大事.
1900/1/1 0:00:002023年4月11日,香港Web 3.0協會11日在香港交易所舉行成立儀式,筆者作為嘉賓也參與了本次大會,和大家同步一下本次的會議信息,以及處于筆者角度,研究了幾個問題,比如說:首先.
1900/1/1 0:00:00在ChatGPT引爆的AI浪潮下,曾被眾多科技公司給予厚望的元宇宙,逐步成為了被拋棄的“試錯”產物.
1900/1/1 0:00:002021年上半年元宇宙概念出圈以來,引起社會各界廣泛關注,學者、業界、監管界、作家、投資機構等都對于如何理解元宇宙進行了深入研究,因職業不同視角而各有側重點.
1900/1/1 0:00:00