全球最大硬盤制造商希捷助力IPFS，存儲集群設計竟有這么多學問 | 2020全球區塊鏈算力大會_Stella:Interstellar AI

8月22日-23日，“共享新機遇——2020全球區塊鏈算力大會暨新基建礦業峰會”在成都舉行。本次大會由成都市新經濟委、成都市科技局及成都市成華區人民政府指導，由成都市成華區新經濟和科技局、成都市成華區投促局、巴比特、鏈節點、印比特主辦。

隨著Filecoin測試網上線在即，存儲賽道備受關注，圍繞Filecoin挖礦的上下游產業鏈也提早展開布局。希捷是目前全球最大的硬盤、磁盤和讀寫磁頭制造商，也是硬盤挖礦賽道的主力品牌。峰會現場，希捷科技資深解決方案工程師李蓁以《分布式數據存儲基石，硬盤點亮數據價值》為主題帶來分享。

以下是演講內容文字精編，由巴比特整理發布。

非常榮幸有機會和大家分享希捷在分布式系統的思考，以及產品上的進展。大家在參與IPFS項目中的過程中，可能或多或少接觸過希捷，我們也是出席本次會議的唯一一家零部件供應商。

希捷是一家非常傳統的制造業廠家，機械硬盤在40年前就被發明出來了，當時一塊硬盤容量僅僅只有5M，而手機存儲容量如今已達到GB級別，128G甚至更高。經過40年發展，希捷年營業額已經超過一百億美元，去年發貨量達到355個EB，員工4萬余人，主力生產工廠在泰國和無錫。

全球最大的慈善基金之一惠康信托在第一季度出售Meta所有股份:金色財經報道，全球最大的慈善基金之一惠康信托（Wellcome Trust）在第一季度出售了其在 Meta Platforms 的所有股份，并削減了對蘋果和微軟股票的投資。（巴倫周刊）[2023/4/24 14:22:38]

市場前景展望

很多嘉賓在分享的時候，都反復強調數據對于人們生活的影響。從增量來看，2002年前產生的數據量總計23個EB，而今年每五個小時就可以產生23個EB的數據，現在是數據爆發式增長的時代。

分布式存儲應運而生。其實分布式文件系統出現的時間很早，20年前銀行就在大規模使用。還有P2P網絡，大家應該使用過BT下載，這并不是新的概念。但是時代賦予了我們新的應用場景，現在我們面對每年產生的數據高達175ZB的新時代。我們需要思考，通過什么形式保存這些數據，以及挖掘這些數據的價值。

全球最大黑客組織Anonymous承諾調查BAYC種族主義、納粹主義等問題:金色財經報道，全球最大黑客組織Anonymous在社交媒體上發布了一段視頻，承諾將調查加密社區針對“無聊猿”BAYC的各種指控，包括種族主義、猿猴主義、納粹主義和神秘主義等，該組織補充說，雖然他們知道 Yuga Labs 的回應，但他們沒有遇到任何“被標記為未經反駁”的東西，并稱希望進行需要幾個月時間的“徹底調查”。不過，Anonymous發布這一消息之后，就有不少 NFT 用戶站出來質疑視頻的真實性，比如加密社區用戶BookSweepers 表示發布視頻的 Twitter 帳戶及其鏈接的 Instagram 和 YouTube 頁面都是假的。 （NFTEvening）[2022/8/16 12:27:33]

石油存儲在地下對我們來說一文不值，數據也是如此，只有當我們能夠訪問數據，處理數據的時候，數據本身才是有價值的。IPFS這類存儲項目的優勢就在于，我們可以把更廣范圍、更深層次的數據保存下來，哪怕今天并不知道這些數據可能會產生怎樣的價值。

全球最大中文IT社區CSDN副總裁孟巖：區塊鏈的三個效用:全球最大中文IT社區CSDN副總裁孟巖在微信群中表達了自己認為的區塊鏈主要的三個效用：降低商業摩擦；為非標準商品定價；促進分布式大規模協作。[2018/3/3]

數據究竟從哪些維度對生活產生影響？一是智能網聯車，它之所以智能是因為系統通過各種傳感器，包括毫米波雷達、激光雷達、攝像頭對采集回來的數據進行分析，賦予更加智能的特點，每輛車跑一天的數據量超過1PB；二是工廠里應用大數據，可以將傳統制造業的效率提高70%；三是智慧城市，可以通過數據分析改善安全、公共設施利用率和交通管理效率。我經常舉一個例子，如果把記者丟到北京街頭，不戴帽子或者口罩的情況下，通過智能攝像頭找到他連5分鐘都不需要。

新技術的落地

對于希捷而言，硬盤做了40年依然可以有很多創新。機械硬盤今年容量是18T，明年容量到20T，后年容量會達到24T。為了使硬盤應對每年35%左右的年化增長率，需要通過激光熱輔助的技術加熱碟片上某一點，產生避雷針效應后把數據寫進去。有了這個技術硬盤碟片容量增長率每年可達35%，預計到2025年硬盤容量會達到50TB。

金色財經實時播報 到訪全球最活躍的匯款網絡之一Stellar恒星網絡:金色財經與The blockchainer、西垚咨詢聯合前往美國、加拿大考察。美國時間1月23日下午，金色財經到訪Stellar恒星網絡。Stellar是由瑞波網聯合創始人Jed Mccaleb發起的一個區塊鏈項目，用于搭建一個數字貨幣與法定貨幣之間傳輸的去中心化網關。它是全球最活躍的匯款網絡之一，接入全球多個國家的金融機構。Stellar是一個開源的支付底層協議網絡，Stellar的分布式賬本提供了一個具有完整資金追蹤能力的實時結算平臺。分布式交易所實現鏈上撮合交易，并支持路徑支付，實現自動化資產兌匯。Stellar的創始人不僅僅是瑞波網聯合創始人，還是前全球最大比特幣交易平臺Mt.Gox創始人和p2p下載軟件鼻祖電驢（eDonkey）創始人。[2018/1/25]

SSD的發展也非常迅猛，這符合八二定律的特點。我們知道80%的在存數據訪問頻率并不高，這就是為什么數據中心超過75%的數據存儲在機械硬盤上。IPFS是以一個存儲冷數據為主的網絡，冷數據存儲正應了機械硬盤的特點。

還有很多數據類型，比如熱數據、超熱數據、冷數據、冰數據，不在的今天討論范圍。熱輔助技術研制超過20年，當年有很多小故事。大家知道在華爾街，我們需要給投資銀行家講故事。SSD被發明以后，很多分析師認為機械硬盤沒有未來。當年希捷給華爾街演示熱輔助技術，傳感器使用的還是黃金，一個兩百納米大小的黃金，在被激光反復加熱以后，黃金有可能會熔化，而且分布時間是不均勻的，換句話說這個機械硬盤不知道會在什么時間失效。

比特幣期貨亮相全球最大期貨交易所CME:據CME數據顯示，明年1月到期的主力合約開盤突破2萬美元，但隨后一路下跌至18345美元，跌幅近6%，未觸及7%的熔斷線。[2017/12/18]

經過20年的研發，現在每個機械硬盤寫入的數據量，熱輔助盤超過4個PB，遠遠超過大家所用的企業級硬盤每年550個TB的水平，平均失效率可以控制在0.4%。這是熱輔助硬盤的特點之一，磁頭上有一個亮點，是激光發生器，功率大概是零點幾毫瓦，用激光擊中碟片的時候加熱，就可以把數據寫進去。

雙磁臂是指兩個磁臂同時使用，性能可以翻倍，大家可以理解為將兩個機械硬盤做進一個盤體里面。

產品組合

簡單給大家秀一下希捷的產品組合，碟片方面有HDD，就是大家在存儲礦機上面使用的規格。還有SSD，覆蓋了大家所使用的各類接口。

大家有沒有聽說過“近存儲計算”的概念，國內外不少廠家在做這方面的研究。數據中心從集中式結構演變成分布式結構以后，每個結點之間都會產生大量東西向的數據流動。對于網絡而言，這是一種極大的開銷。“近存儲計算”階段就是在SSD上面內置一個計算引擎。HDFS也是分布式存儲系統，需要對數據進行壓縮。如果在SSD內置一個引擎，就不需要跟CPU綁定，不需要采購這樣一個硬件，效率會得到極大提升。這是大佬需要思考的問題，在這里就不展開了。

對希捷而言，目前的策略是模塊化。大家知道希捷是做盤的廠家，收購了若干廠商以后，希捷也具備了制造機架，以及控制器模塊的能力。就像是搭建樂高積木的時候，可以選擇不同的積木，希捷也是這樣的策略。根據冷數據或者熱數據的需求，以及定制化數據處理模式的機器，搭配不同的盤、不同的機架、不同的控制器模塊達到所需要的產品形態。

對于IPFS存儲的思考

分享一下我個人對于IPFS存儲的思考，我注意到今天參與活動的規格差異非常大。對于希捷而言，從P1到C2的過程并不是我們關心的階段。現在有很多礦機是所謂的緊耦合的結構，就是把上面這幾個階段統統放在一個盒子里處理。

如果法律階段要明確這個東西的產權，這是好的解決方案。但是從大規模集群而言，這個形式會帶來很大的問題，P1需要綁定AMD的CPU，但是供應能力是不足的。如果所有東西放在一個盒子里，沒有辦法實現彈性擴展。要么就是存儲先耗盡，要么就是計算能力先耗盡，沒有辦法對資源做單獨擴展，這和分布式架構是相悖的結構。

對各個階段做一個解耦，大家參考所有云服務廠家可以看到，面對不同的存儲場景，熱數據、冷數據、冰數據都有相應的存儲解決方案。IPFS沒有辦法回避這個事情，就是一定要做解耦。這樣做的好處是每個階段都可以做單獨的橫向擴展，提升硬件利用率。現在專用硬件的采購量并不需要那么大，同時上線節奏可以極大加快。

IPFS本身不具備數據高可用的機制，怎么在大規模存儲集群里確保數據在每24小時時空證明階段在線，這是沒有辦法回避的一點。我看到有一些礦機是單路電源，在存儲集群密度高的情況下，掉線任何一個節點的數據損失都很大，沒辦法在25秒以內返回結果，懲罰可能大于挖礦的收益。

我做了十多年的企業級，知道有多么困難。舉個例子，如果用一個10T的盤做數據重建需要50多個小時，在這期間再出現掉盤的情況，那么整個邏輯卷就會失去訪問。如果使用我們的RBOD，就可以在RBOD上做好數據保護，再通過以太網或者SAS電纜映射給主機，高可用是在RBOD上面管理，對于用戶而言，可以減少很多這方面的痛苦。如果前面沒有太多思考，后面做礦池就會遇到很多痛苦的懲罰。

我建議大家在存儲這方面，一是盡可能使用大容量的HDD，二是把高可用機制卸載到存儲設備商。這時候RBOD的形態比JBOD的形態更好，因為有希捷自己的糾刪芯片。

今天關于希捷產品還有IPFS的思考和分享就這么多，謝謝大家。

Tags：stellarTELLStellaLARInterstellar AI3X Long Stellar Tokenflare幣今日價格

中幣