相關報告
區塊鏈新基建:溯源——以區塊鏈為器,掘金數據價值,2020.5
區塊鏈新基建:物聯網區塊鏈如何打造差異化競爭優勢?,2020.7
摘要
感謝分布式資本提供研究支持,以及儲迅信息技術、CrustNetwork等代表性企業的交流分享。
基于分布式存儲的前景:分布式存儲為互聯網基礎構架和商業模式帶來的變革與創新空間,將開辟新的存儲應用市場。分布式存儲采用不同于傳統中心化存儲的資源和市場激勵方式,可以解決中心化互聯網架構下安全性、時效性及成本問題,將帶來互聯網基礎架構變革。另一方面,分布式存儲為個人節點加入市場交換創造了基礎,可以深度挖掘數據內容價值,開辟全新的存儲空間和應用市場。目前的分布式存儲仍面臨I/O性能問題、數據價值分層、應用服務質量等技術瓶頸,在實際應用中需要引入中心化組織進行彌補。
以IPFS協議為代表的分布式存儲系統帶來存儲新思路,將成為下一代互聯網基礎設施。IPFS協議是一種文件存儲和內容分發網絡協議,整合了多種成功的分布式系統與區塊鏈技術,為用戶提供統一的可尋址數據存儲。其本質是一個P2P的分布式存儲系統,人人都可以作為存儲文件的服務器,通過基于文件內容生成的唯一編碼去訪問網絡中的文件資源。分布式存儲系統可以與去中心化的區塊鏈技術相結合,解決中心化互聯網架構下數據存儲的安全性、用戶協作的時效性和存儲與帶寬成本的問題,將帶來互聯網基礎架構的變革。
分布式存儲將充分激發個人存儲資源和內容貢獻的市場價值,創新互聯網商業模式。全球數據量的爆發式增長推動云存儲市場的快速發展,邊緣云計算和小型數據中心成為行業趨勢,分布式存儲有望率先打開個人云存儲市場空間。個人可以將閑置的存儲資源投入到分布式存儲系統進行市場交換,可以在互聯網上安全地進行內容發布、交換和價值共享,分布式存儲就這樣推動著個人存儲資源市場的資源配置,而這在傳統互聯網巨頭控制中心云模式下是無法實現的。
分布式存儲已和傳統存儲不斷融合應用,現有的技術瓶頸需引入中心化組織形式進行彌補。現有的存儲解決方案通常將分布式技術與傳統存儲方案相結合:一方面,對數據進行分布式備份保存,使數據更接近邊緣側,同時避免數據的物理損壞和人為篡改;另一方面,通過一定程度的集中存儲和集中管理來降低系統運維成本,提高服務質量。現有的分布式存儲仍面臨若干技術瓶頸:第一,目前的分布式存儲暫時無法實現數據價值分層,難以實現有效激勵,可以考慮將底層構架和應用層策略相結合;第二,分布式存儲從代碼實現到協議層都有很大的優化空間,還會受到網絡規模限制,存在I/O性能問題;第三,存儲數據價值較高的用戶需要承擔更大的服務質量風險,付費意愿較弱,需要應用層解決方案。總之,考慮到系統運維成本、服務質量和宏觀監管等問題,未來的分布式存儲系統需要引入中心化組織形式來彌補運營成本。
投資建議:目前A股上市企業中,涉及存儲類的標的將長期受益于分布式存儲帶來的變革,包括兆易創新、北京君正、同有科技、朗科科技、紫光國微、長江存儲等,具體內容請參考個股深度。
風險提示:分布式存儲商業模式落地不及預期;分布式存儲技術發展不達預期。
1核心觀點
1.1核心推薦邏輯
基于分布式存儲,將開辟新的存儲應用市場。分布式存儲采用不同于傳統中心化存儲的資源和市場激勵方式,不僅僅是充分利用分布式節點資源,而是為個人節點貢獻的內容投入市場交換創造了基礎,從而深度挖掘數據內容價值、開辟全新的應用市場,這在傳統的互聯網公司控制中心云平臺數據的情況下是無法實現的。同時,分布式存儲與中心化存儲將不斷融合,改變現有的互聯網構架和商業模式。
研報:識別“具有系統重要性”的區塊鏈銀行的協議可以預防市場崩潰:金色財經報道,泰國Chulalongkorn 大學研究員 Kanis Saengchote 最近開發了一個框架,用于識別和衡量去中心化金融(DeFi)機構的系統性風險。
新協議稱為全球系統重要性協議(G-SIP),這是一個識別和衡量“全球系統重要性銀行”(G-SIB)的系統。使國際清算銀行能夠發現弱點并制定標準,從而更好地防止損失。Saengchote 的研究論文詳細介紹了一種方法,通過該方法可以將類似的標準應用于論文中所說的“區塊鏈銀行”,即在區塊鏈上運行的任何 DeFi 協議。[2023/8/3 16:15:07]
1.2我們區別于市場的觀點
市場低估了分布式存儲為互聯網基礎構架和商業模式帶來的變革與創新空間。市場通常將分布式存儲視為一種新的技術,而忽略了分布式存儲帶來的個人存儲資源、用戶內容貢獻價值挖掘和市場交換的潛力。在分布式文件系統的互聯網上,個人存儲資源可以投入到市場進行資源交換,為用戶貢獻的內容在數據確權、安全的基礎上進行內容價值提供市場交換的平臺。因此,分布式文件系統將會催生更多的全新的互聯網應用,而非傳統互聯網的技術迭代。
2分布式存儲將成為下一代互聯網基礎設施
目前,互聯網將海量計算機終端連接在一起,使得用戶能夠訪問存儲其他計算機終端上的海量數據。數據的傳輸與訪問,是基于HTTP為代表的互聯網協議實現的,數據是以計算機終端IP為地址進行中心化存儲的,具體存儲數據的服務器節點就像一個集中式的倉庫,要承擔巨大流量訪問、數據傳輸壓力。能否將數據文件分散存在網絡不同服務器節點上,革新互聯網基礎構架?
類似IPFS這種分布式存儲協議逐漸興起,作為HTTP的補充,打造面向全球、點對點的分布式版本文件系統,能將所有具有相同文件系統的計算設備連接在一起。就IPFS而言,用戶尋找的是存儲在某地方的內容,而不是某地址,就只需確認驗證內容的哈希,這樣就能過獲得速度更快、安全、健壯、持久的網頁。
我們將探討分布式存儲將如何帶來互聯網基礎構架的變革,將創造怎樣的新的應用場景和市場。
2.1以IPFS協議為代表的分布式存儲帶來新思路
IPFS協議是一個將多種成功的分布式系統思路與區塊鏈相結合的文件存儲和內容分發網絡協議,為用戶提供統一的可尋址數據存儲。IPFS由ProtocolLab提出,字面意義是星際文件系統。其本質是一個P2P的分布式存儲系統,將所有具有相同文件系統的計算設備連接在一起,目標是補充甚至替代超文本傳輸協議HTTP。與現有Web協議不同的是,對于一個存放在IPFS網絡的文件資源,不是用基于域名的地址去訪問,而是通過基于文件內容生成的唯一編碼去訪問,不需要驗證發送者的身份,只需要驗證內容的哈希,可以讓網頁的速度更快、更安全。IPFS的網絡上運行著一條區塊鏈,即用來存儲互聯網文件的哈希值表,每次有網絡訪問,即要在鏈上查詢該內容的地址。IPFS協議最大的特色是系統的耦合及設計的綜合性,其整合的分布式技術包括BitTorrent協議、版本控制系統Git、MerkelDAG、分布式哈希表DHT和自認證文件系統SFS。因此在IPFS系統中,人人都可以作為存儲文件的服務器。
IPFS協議借鑒了BitTorrent協議諸多優點,并進行了創新,打造持久且分布式存儲和共享文件的網絡傳輸協議。BitTorrent是一種廣泛應用的內容分發協議,特點是充分利用用戶的上載帶寬,使得下載用戶越多,下載速度越快。在中心化存儲的FTP、HTTP協議中,每個用戶下載所需文件,各個用戶之間沒有交互。如HTTP,每次當同時訪問和下載文件的用戶過多時,由于服務器處理能力和帶寬的限制,下載速度會急劇下降,部分用戶甚至會無法訪問服務器。而BT協議下,分配器或文件持有者將文件發送給一名用戶,再由這名用戶轉發給其它用戶,用戶之間相互轉發自己所擁有的文件部分,直到每個用戶的下載全部完成。這種方法可以使下載服務器同時處理多個大體積文件的下載請求,而無須占用大量帶寬,因此常用于大型文檔和自由軟件的發布以降低服務器負擔。
開源證券研報:能否取得合法地位等將直接影響比特幣長期價格表現:2月9日消息,開源證券宏觀研報顯示,比特幣目前可在部分國家替代官方法幣,用于商品購買、金融交易等。同時,比特幣的數量上限被鎖定為2100萬枚,較黃金更加稀缺。這一背景下,比特幣被認為有望成為全球性“保值貨幣”,可對沖美元等濫發風險。中短期來看,伴隨全球經濟在疫苗支持下修復加快、主流央行政策退出預期抬升,比特幣價格波動或將加大。長期而言,比特幣能否真正成為全球性“保值貨幣”,與數字貨幣發展、監管政策變化等密切相關。比特幣目前合法性未被廣泛承認,在大部分國家游離于法律和監管的灰色地帶。對于比特幣而言,能否取得合法地位及不被有國家主權背書的數字貨幣替代,將直接影響長期價格表現。(券商中國)[2021/2/9 19:15:53]
IPFS團隊對BitTorrent進行了創新,增加了信用和帳單體系來激勵每個節點分享數據,稱為BitSwap協議。用戶在BitSwap里分享數據會增加信用分,從其他節點接受數據則會降低信用分。如果用戶只去檢索數據而不分享數據,信用分就會越來越低,而被其它節點忽略。
類似于于互聯網的七層協議模型,IPFS構架分為八層子協議棧。IPFS作為分布式存儲協議,核心功能包括:文件內容多人協調和版本可回溯、不可篡改,DHT管理帶來的離散性、伸縮性和良好的容錯性,以及基于IPNS的文件域名系統。
內容版本方面,IPFS使用分布式版本控制系統Git,支持多人協同工作,記錄每次更新并標記不同的版本號,一旦發生問題,可以將文件回溯到之前的任何一個版本。本地版本控制系統和集中化的版本控制系統都是由單一服務器保存所有文件的修訂版本,一旦服務器發生故障,則面臨丟失所有數據的風險。Git是分布式版本控制系統的一種,客戶端除了保存最新版本的文件,還把代碼倉庫和歷史記錄都完整地鏡像下來。這樣,任何一處協同工作的服務器發生故障,都可以用任何一個本地倉庫進行恢復。Git還可以比較文件變化細節,查出誰進行了什么修改,從而可以在發生問題時快速準確的找出原因。更進一步,許多DVCS系統都可以指定和若干不同的遠端代碼倉庫進行交互,用戶可以在同一個項目中和不同工作小組的人相互協作,根據需要設定不同的協作流程,而這在以前的系統中是無法實現的。
IPFS團隊對Git數據結構進行改造,在MerkleTree的基礎上得到了MerkelDAG,擁有內容尋址、防篡改、去重三大功能。IPFS將文件劃分成單個大小不超過256kB的數據塊,每個數據塊擁有唯一的哈希值,并構造一個MerkelDAG將所有文件碎片組織起來。MerkelDAG是實現版本化文件系統的一種核心數據結構,比MerkleTree的限制更少,但是保留了其兩點精髓:1)父節點哈希由子節點哈希決定,即父節點哈希由子節點哈希拼接的字符串再次哈希而成;2)父節點中包含指向子節點的信息。任何一個下層節點的改動都將導致上層節點哈希值的變動,最終根節點的哈希值也將變動,因此MerkleDAG的三大功能得以實現:1)內容尋址:使用多重哈希來唯一識別一個數據塊的內容;2)防篡改:數據接受方只需一段Merkle路徑上的哈希值,就可以檢查數據是否被篡改;3)去重:內容相同的數據塊的哈希是相同的,可據此刪除重復數據,節省存儲空間。
IPFS的路由功能采用分布式哈希列表DHT,幫助客戶節點快速找到所需數據所在的節點,具有離散性、伸縮性和良好的容錯性。DHT是一種分布式哈希表,通過存儲的鍵值對提供查詢服務:鍵值對存儲在DHT中,節點可以檢索給定鍵對應的值,鍵值對的映射由網絡中所有的節點維護。在不需要服務器的情況下,每個節點負責一小部分路由和數據存儲,從而實現整個DHT網絡的尋址和存儲。即使有節點加入或離開,對整個網絡的影響也很小,因此DHT可以擴展到非常龐大的節點。DHT具有以下性質:1)離散型:構成系統的節點之間都是對等的,沒有中央控制機制進行協調;2)伸縮性:不論系統有多少節點,都要求高效工作;3)容錯性:不斷有節點加入和離開,不影響整個系統的工作。
動態 | 中泰證券研報推薦區塊鏈產業投資機會:中泰證券最新研報認為,伴隨此次區塊鏈產業生態戰略的地位提高,應該從三條主線把握相關投資機會:1)區塊鏈技術作為新一代信息技術的后進之秀,及“核心技術自主創新重要突破口”的定調下,建議近期密切關注區塊鏈主題投資下的相關機會;2)建議關注受區塊鏈技術應用驅動的金融創新利好的大金融板塊;3)區塊鏈、5G及AI等信息技術已經成為謀求競爭新優勢的戰略方向在,建議持續關注以硬科技引領的科技創新類企業。(證券時報)[2019/10/27]
IPNS是IPFS的文件域名系統,像HTTP系統的域名一樣,使用戶搜索文件時只需查詢文件名,而不受文件內容變更的影響。IPFS中文件的哈希值完全取決于文件內容,不僅難以記憶,一旦修改文件內容其哈希值也會發生改變,每次更新文件后都需更新引用的哈希值,十分不便。為了能夠在不破壞其鏈接的情況下更改文件內容,IPFS團隊使用了一種標記更新網址哈希的域名系統,即星際名稱系統IPNS。IPNS是一個去中心化的命名系統,使用類似哈希的地址安全地指向可變內容,每個文件都可以被協作命名為易讀的名字,通過搜索就可以找到文件。自認證文件系統SFS對文件進行命名,同時提供了IPNS以解決傳播問題,很好地解決了當前用戶不習慣輸入哈希值訪問文件的問題,在現有的互聯網系統和IPFS系統間搭建了一個橋梁。
簡單的說,基于IPFS協議存儲的文件是打散成許多可驗證的碎片文件,分布在網絡中,訪問者通過內容編碼找到這些文件的位置后進行下載,由于是分散存儲,不必須要求所有節點服務器都必須在線,以此IPFS希望達到創建持久且分布式存儲和共享文件的網絡傳輸協議的目標。而HTTP為代表傳統的中心化存儲差別十分明顯——HTTP的文件是中心化的方式存儲,通過文件的域名進行訪問,且域名文件服務器需要保持在線,否則將無法訪問。
2.2分布式存儲將帶來互聯網基礎架構變革
隨著互聯網與通信、人工智能、物聯網、云計算/邊緣計算等技術的發展,萬事萬物都可以被記錄并用數據表達,數據從單一內部小數據向多元動態大數據轉變。據IDC預測,全球數據圈的規模將由2018年的33ZB增長至2025年的175ZB,且文本、圖片、視頻等非結構化數據將擁有更高的增長率,在整體數據圈的占比也將持續增加。因此,需要更先進的互聯網基礎架構來對數據進行采集、存儲和利用。
目前,中心化互聯網架構下的主要問題集中在安全性、時效性和集中化三個方面,而以IPFS為代表的分布式存儲協議將通過解決以下問題帶來互聯網構架的變革:
傳統的HTTP協議使用非對稱架構實現網絡的高并發,但是中心服務器難以負擔過大的傳輸數據量,影響用戶體驗,云計算廠商和電信運營商需要為此付出較大的設備成本。IPFS協議解決了熱點文件的存儲問題,但一個文件只有被不斷訪問才能確保其存儲有效性,冷門且具有價值的文件容易丟失,主要原因是激勵層缺失導致的節點不穩定性。目前,一種對標IPFS的分布式技術HTTPX也在悄然崛起,提供去中心化的CDN服務、存儲服務和GPU算力服務。HTTPX兼顧了HTTP協議的優勢,對路由和傳輸邏輯進行重新定義,采用對稱架構,將網絡的分裂做到了前所未有的程度。
HTTPX是一種更輕量化、更靈活、性能更加完善的P2P技術。HTTPX的技術架構設計屬于網格設計,每一個節點既是獨立個體也是全局功能體,可以支持存儲、計算和傳輸數據。用戶連接最近的節點接入HTTPX網絡,該節點將尋址找到臨近節點,發現百萬級別的信息,定位資源存儲節點,并通過最優網絡傳輸路徑回傳到用戶臨近節點。HTTPX和IPFS相比具有明顯優勢,有望將云計算服務推向新的高峰:
動態 | 研報:超過總量80%的ETH由7572個地址持有:據Cointelegraph報道,數字資產研究公司Delphi Digital近日發布的一份報告顯示,以太坊(ETH)的總循環供應量的80%以上由7572個地址持有,而這些地址的ETH持有量均在1000個以上。其中6490個地址的持有量在1000到10000枚ETH之間,923個持有量在10000到10萬枚ETH之間,155個容量在10萬枚到100萬個ETH之間,只有4個地址擁有100萬到1000萬個ETH。[2019/3/10]
1)高性能:網格系統設計大幅縮短用戶到節點的物理距離和網絡距離,實際測試中TTL下降60%,提供更低延時的優質服務響應;
2)低成本:為產業鏈服務,定價較低;硬件兼容性高,可部署到家庭、社區、辦公場所;
3)兼容性強:兼容HTTP、HTTPS協議,同時提供高級HTTPX開源代碼接入模式;
4)實力雄厚:采用P2P思想,CDN支撐能力出眾;提供存儲、GPU資源的挖礦模式,真正做到一機多用。
5)快速發布:帶寬需求大,發布周期短,資源提供方不用擔心項目延期帶來的資本周轉問題。
3?分布式存儲開辟互聯網基礎設施產業新格局
3.1分布式存儲開發新的存儲市場
全球數據量的爆發式增長推動云存儲市場的快速發展。云存儲是一種以數據存儲和管理為核心的云計算服務,指通過集群應用、網絡技術或分布式文件系統等,將網絡中大量不同類型的存儲設備通過應用軟件集合起來協同工作,共同對外提供數據存儲和業務訪問功能的系統。換句話說,云存儲就是將資源放到云上供人存取,用戶可以在任何時間、任何地點,通過可連網裝置連接到云上方便地存取數據。
根據云存儲服務性質的不同,可以分為公有云、私有云和混合云。其中,公有云面向包括個人、家庭、企業在內的多種客戶;私有云由企業或組織使用及維護,用戶在個性化等方面有更多的控制權;混合云將公有云和私有云進行混合和匹配,達成相對高性價比解決方案。據IDC預測,2025年中國數據規模將達到48.6ZB,其中超過80%為非結構化數據,且由于發展滯后北美4-5年,中國云市場增速高于全球水平。2018年中國云計算整體市場規模達962.8億元,增速為39.2%。其中,公有云市場規模達到437億元,增速為65.2%,預計接下來三年內仍將快速增長。
分布式存儲將開辟新的應用場景,充分激發個人存儲資源和內容貢獻的市場價值,創新互聯網商業模式。隨著分布式存儲技術和生態的發展,將充分激發個人存儲資源市場的資源配置,激勵更多的個人存儲資源進入市場——即個人可以將閑置的存儲資源投入到分布式存儲系統進行市場交換,這在傳統互聯網巨頭控制中心云模式下是無法實現的。更重要的是,個人在互聯網上的內容共享將可以安全地進行發布、交換和價值共享。如D.Tube是一個加密分布式視頻平臺,建立在STEEM區塊鏈和IPFS點對點網絡之上,目標是成為YouTube的替代品,允許用戶在IPFS基礎上觀看或上傳視頻,并在不可變的STEEM區塊鏈上進行分享或評論,同時賺取加密通證。D.Tube的所有數據都是公開的,任何有互聯網連接的人都可以對其進行分析,無需廣告即可運行,提供了最佳的用戶體驗。可以這樣說,幾乎任何現有的互聯網應用都可以遷移到分布式文件系統上,獲得新的體驗和創新商業模式,這里面的想象空間是無限的。
分析 | 研報:區塊鏈將率先在金融、游戲、通證資產實現落地:2月20日消息,維京資本近日發布《2018區塊鏈年度報告 》,其中指出,2019年,在區塊鏈產業方面,區塊鏈將在金融、游戲、通證資產率先落地并且比過往任何時候都走得更遠,此外,還有物聯網、供應鏈、BaaS方面都是值得期待的領域。產業也會出現某種形式上的整合浪潮,在熊市背景下,有獨特競爭優勢、產品優勢的項目將會存活并成功。[2019/2/20]
邊緣云計算和小型數據中心成為行業趨勢,分布式存儲有望率先打開個人云存儲市場空間。2019年11月,手機上網用戶規模達13.1億,個人網盤月度活躍用戶超1億,個人存儲市場仍有龐大的潛在用戶基礎和可利用存儲空間。面對數據規模的高速增長,邊緣云計算和分布式存儲成為行業趨勢,利用分布式文件系統將個人閑置的存儲資源投入到網絡中,進行市場交換,將成為分布式存儲率先進入的領域之一,目前已有這方面的初創應用。
3.2分布式存儲已和傳統存儲不斷融合應用
在分布式存儲的實際應用中無法避免一定程度的中心化,因此常和傳統存儲方案融合應用。分布式存儲會帶來系統性能和管理成本的問題,因此現有的存儲解決方案通常將分布式技術與傳統存儲方案相結合:一方面,對數據進行分布式備份保存,使數據更接近邊緣側,同時避免數據的物理損壞和人為篡改;另一方面,通過一定程度的集中存儲和集中管理來降低系統運維成本,提高服務質量。
案例1):儲迅的分布式存儲云服務
上海儲迅信息技術有限公司是一家專注于企業生產數據存儲和管理的高新技術企業,核心團隊來自于美國存儲公司Rasilient,有超過15年的存儲行業研發和運維經驗。儲迅在大規模存儲運維、存儲安全及性能優化領域擁有核心的硬件軟件技術,迄今為止已部署和存儲超過300PB的關鍵業務存儲數據,其中對圖像數據的存儲和處理在業界處于領先地位。儲迅已在安防、醫療、媒資等行業提供了成功的存儲解決方案,和因特爾、中國移動等多家企業開展業務合作。
儲迅為企業提供專業的分布式數據存儲方案,在數據存儲優化、I/O優化、大規模系統運維管理等方面經驗豐富。主打產品有高性能分布式文件系統、分布式塊存儲、分布式對象存儲網關等,同時提供從硬件選型到挖礦程序優化、存儲性能優化、運維調度等一整套的Filecoin解決方案。和傳統的集中數據中心存儲相比,分布式存儲的優點在于數據存儲更加分散,對地理位置的依賴性更弱,可以規避多種風險,實現企業輕資產運營,降低運維成本。
案例2):CRUST鏈接分布式云
CRUST是基于有意義工作量證明機制和擔保權益證明共識構建的數字加密應用層,同時也是一種支持去中心化存儲與計算的新一代區塊鏈技術。CRUST實現了去中心化存儲的激勵層協議,適配包括IPFS在內的多種存儲層協議,并對應用層提供支持:第一層量化資源和工作量,提供了一個讓所有人都能認可的計算方式MPoW,這是解決問題的根本;第二層利用GPoS達成共識,共同維護網絡;第三層為用戶提供去中心化的存儲服務和檢索服務,同時CRUST的架構也有能力對去中心化計算層提供支持,構建分布式云生態。
CRUST與Filecoin最大的不同點是采用了可信執行環境,核心概念是用一個第三方硬件為載體,保證其中創建和運行的數據不可被攻擊和篡改。主流的芯片廠家如Intel、AMD、ARM等,生產的CPU內都有TEE空間,可以在其中運行開源的、通過CRUST社區成員認可的程序包,實現對資源量化工作的監督,進而把量化證明通過簽名發送到區塊鏈網絡。Filecoin對節點工作量的證明采用的方法是零知識證明和網絡交叉驗證,同樣是開源算法,但是帶來了硬件消耗和帶寬需求的問題,還需要刻意提高算法的復雜度來保證節點短時間內不能作弊。TEE則解決了這些問題,在本地就可以完成資源證明過程,降低網絡資源占用,簡化工作量量化的過程。另外,由于TEE內程序對數據進行封裝保存時無須擔心被篡改,算法效率更高,用戶可以獲得更好的使用體驗。
4分布式存儲面臨的技術瓶頸與發展機遇
4.1數據價值分層是分布式存儲經濟激勵的關鍵
不同數據的市場價值是不同的,不同個體對相同數據的價值判斷也并不一致。而存儲節點并不知道數據的內容、難以評判數據價值的情況下,如何有效將存儲激勵與數據市場價值做到優化配置?
數據價值分層是甄別數據價值以及實現有效激勵的關鍵。分布式的節點負責存儲數據碎片,但并不知道數據內容以及數據的價值,也就是說,礦工的工作量衡量如果不能考慮數據價值的因素,就很難實現更優化的市場激勵調節。以Filecoin采用的時空證明機制為例,礦工節點的存儲工作量衡量,與文件碎片內容的數據價值無關。Filecoin目前并沒有對數據價值進行具體分層,只做了垃圾數據和可驗證數據的區分。目前現存的共識機制,均僅限于礦工的存儲工作量衡量,而無法代表數據價值。礦工節點的物理損毀、網絡服務質量差的成本是以經濟激勵來衡量,但因此造成的用戶數據服務質量和數據價值損失并不對等。簡單說,礦工最多損失的是系統經濟激勵,而用戶損失的可能是數據的損毀或極差業務服務質量——畢竟對于礦工來說,數據的價值是的核心衡量因素是存儲容量。
應考慮底層構架和應用層結合的方式解決數據分層問題。解決數據價值分層,對分布式存儲的經濟激勵十分關鍵。在基礎構架層面難以單獨解決,必須結合應用層來實現。結合應用場景,在應用層實現數據的分層,從而實現礦工節點的分層;如,對于一些服務質量、內容價值較高的數據,則可以圈定一個激勵價格較高的礦工市場,同時對礦工節點的硬件配置、服務質量做更高的要求。這類應用在私有網絡、局域網更方便實現。針對不同的應用場景,采用不同的應用層策略。也就是說,廣泛而統一的分布式存儲網絡很難滿足各個場景和用戶個體的需求,針對不同場景采取不同的應用層解決方案來完成數據價值分層是可行的方案。
4.2I/O性能瓶頸需要底層和應用層聯合優化解決
分布式存儲會帶來系統I/O性能問題。和傳統存儲系統相比,分布式存儲需要將文件打碎、多節點備份保存,在查詢使用數據時需要進行大量碎片文件的調度工作,工程量極大。另外,當文件較大時,用于內容尋址的哈希表也會很大,尋址時間也會更長。更為關鍵的是,礦工節點的網絡資源狀況對網絡I/O性能的影響也存在諸多不確定性,尤其是那些流媒體數據,若某些數據碎片的節點網絡狀況較差,則會影響整個數據文件的訪問服務質量。中心化存儲下,通過CDN等手段可以解決這些問題,擁有較好的客戶體驗。因此,現有的分布式存儲系統的I/O效率是技術新能方面首要考慮的問題之一,從代碼實現到協議層都有很大的優化空間,還需要進一步突破。
實驗測試顯示IPFS的I/O性能還有待進一步改善。由于采用分布式存儲,文件的讀取受到節點自身及全網其它節點的影響,主要包括:節點數量和穩定性、帶寬、網絡位置等。來自復旦大學的研究人員對IPFS的I/O性能做了一項實驗,并和HTTP進行對比,以驗證IPFS網絡處理請求時的延遲和吞吐量表現。遠程讀取操作的平均延遲方面,當請求是小的請求時,在1k-4k間,HTTP延遲比IPFS低。遇到16-256k之間的文件,IPFS的延遲狀況由于HTTP。當處理大文件請求時,IPFS在延遲上的表現不盡人意,尤其是請求大小朝貢16MB時,IPFS的處理時間接近了20秒。超過64MB時,延遲更是可以達到70秒,是HTTP的7倍。當然,這是實驗室測試條件下的結果,在實際應用過程中,尚未有具有說服性的案例;無論如何,IPFS等分布式存儲方案若想替代HTTP等中心化方式,還有很多底層技術構架、協議和應用生態方面的改進與探索。
分布式網絡的傳輸效率還非常依賴網絡規模,激勵機制有待完善。P2P的文件交互傳輸協議采用的是打散文件、多點續傳的方式,傳輸效率十分依賴分布式網絡中的節點數量。因此,需要完善激勵機制,使節點用戶在自己無下載需求時仍積極接入網絡,為其他用戶提供存儲服務。當去中心化網絡中在線的節點數比較穩定之后,傳輸速度會更快。從長遠來看,協調好多點續傳以后的去中心化存儲系統擁有十萬甚至百萬級的節點數量,系統I/O效率才有望比擬當下中心化CDN存儲的系統效率。
4.3服務質量保障
去中心化系統的服務質量還有很大的優化空間。分布式存儲市場上現有的落地應用不多,普遍面臨節點數量規模不足、應用層開發不夠完善等問題,用戶使用體驗無法和成熟的中心化存儲產品相比,因此付費意愿也較弱。因此,要解決如何用不可靠的分布式節點提供可靠的存儲服務這個問題,首先要設定共同認可激勵和懲罰機制,其次還需要通過經濟激勵之外的手段來規范礦工行為。
存儲數據價值較高的用戶需要承擔更大的服務質量風險,亟待應用層解決方案。區塊鏈只負責監控礦工工作量的完成情況并予以獎懲,但是無法彌補用戶損失,因此服務質量問題交由應用層來解決。比如,可以根據礦工的歷史懲罰記錄區分服務質量等級,用戶需要存儲重要數據時,可以資源選擇收費更多的、質量更高的存儲服務。只有當越來越多的用戶愿意消費,網絡中的節點越來越多時,去中心化存儲系統的整體效率才能提升,服務質量才更有保障。因此,考慮到系統運維成本、服務質量和宏觀監管等問題,分布式存儲系統無可避免地會存在一定程度的集中管理和控制。
4.4在應用、運營層面中心化組織與分布式存儲將進一步融合
顯然,分布式存儲在I/O瓶頸、數據價值分層和應用服務質量方面需要引入中心化組織形式來彌補運營成本。分布式存儲所面臨的上述問題,給應用帶來了較高的運營成本,因此可以引入中心化的組織方式來彌補高昂的運營成本,就像BitTorrent采用中心化的方式來管理哈希表DHT一樣。簡單說,數據碎片可以分布式存儲,但在不同的應用場景可以引入一些限制。例如,I/O瓶頸方面,針對那些對I/O性能較高的應用,如流媒體數據,則以激勵方式鼓勵節點在適當的物理位置或提高節點I/O性能。在數據價值分層方面,對于一些特別重要的數據,核心數據采用中心化的存儲、一般數據采用分布式存儲,這類相結合的方式是較為現實的解決方案。應用服務質量方面,限制數據文件存儲的物理和網絡位置、QoS保障,來確保數據文件的安全,因此,需要對此類礦工進行一些激勵補償。另外,在應用層面,復雜且較長IPNS對于用戶是較難記憶和操作的,類似于DNS服務實現IP地址和域名之間的管理一樣,利用中心化的方式解決IPNS用戶不友好的,引入類似文件存儲域名的服務,這也是中心化與分布式存儲進一步融合的方向。
5投資建議
綜合以上分析,我們建議關注布局存儲相關產業鏈相關公司,包括:
存儲廠商:兆易創新、北京君正、同有科技、朗科科技、紫光國微、長江存儲。
10月15日下,網上流傳一個濱合云智科技有限公司注銷視頻,在網絡上極快地引起各方注意,那么濱合云智究竟是什么情況呢?矢量財經第一時間派出記者對濱合云智的CEO戴偉康先生進行專訪.
1900/1/1 0:00:00在比特幣早期的1.0時代,人們獲得比特幣主要是通過礦機挖礦獲得比特幣或是直接從持幣者手中購買比特幣這兩種方式。在比特幣價格快速增長的情況下,收益也在不斷的增加.
1900/1/1 0:00:002020年10月15日,由西安市人民政府主辦的"2020中國電子商務博覽會";西安市大數據資源管理局主辦.
1900/1/1 0:00:00尊敬的用戶: 為了優化用戶交易體驗,幣虎交易平臺將于2020年10月16日14:00上線存儲板塊.
1900/1/1 0:00:00親愛的BithumbGlobal用戶:BithumbGlobal將在創新板上線GIV數字資產服務.
1900/1/1 0:00:00市值管理機器人,做市機器人,刷單機器人市值管理機器人內置多種交易策略,滿足不同的類型。設置策略后,機器人將智能分配每次進單的條件,嚴格執行交易策略,交易補單策略,根據當前行情,實時進行云大數據調.
1900/1/1 0:00:00