以太幣交易所 以太幣交易所
Ctrl+D 以太幣交易所
ads
首頁 > MANA > Info

全球最大硬盤制造商希捷助力IPFS,存儲集群設計竟有這么多學問 | 2020全球區塊鏈算力大會_區塊鏈

Author:

Time:1900/1/1 0:00:00

8月22日-23日,“共享新機遇——2020全球區塊鏈算力大會暨新基建礦業峰會”在成都舉行。本次大會由成都市新經濟委、成都市科技局及成都市成華區人民政府指導,由成都市成華區新經濟和科技局、成都市成華區投促局、巴比特、鏈節點、印比特主辦。

隨著Filecoin測試網上線在即,存儲賽道備受關注,圍繞Filecoin挖礦的上下游產業鏈也提早展開布局。希捷是目前全球最大的硬盤、磁盤和讀寫磁頭制造商,也是硬盤挖礦賽道的主力品牌。峰會現場,希捷科技資深解決方案工程師李蓁以《分布式數據存儲基石,硬盤點亮數據價值》為主題帶來分享。

以下是演講內容文字精編,由巴比特整理發布。

非常榮幸有機會和大家分享希捷在分布式系統的思考,以及產品上的進展。大家在參與IPFS項目中的過程中,可能或多或少接觸過希捷,我們也是出席本次會議的唯一一家零部件供應商。

希捷是一家非常傳統的制造業廠家,機械硬盤在40年前就被發明出來了,當時一塊硬盤容量僅僅只有5M,而手機存儲容量如今已達到GB級別,128G甚至更高。經過40年發展,希捷年營業額已經超過一百億美元,去年發貨量達到355個EB,員工4萬余人,主力生產工廠在泰國和無錫。

報告:阿里巴巴將有望取代美國 IBM成為全球最大的區塊鏈專利持有者:8月30日消息,知識產權咨詢公司 KISSPatent 研究報告指出,阿里巴巴有望取代美國科技巨頭 IBM,成為全球最大的區塊鏈專利持有者。報告稱,目前全球區塊鏈專利數量由 IBM 和阿里巴巴分居一、二名,而盡管 IBM 目前仍位居榜首,阿里巴巴在這一領域占據“絕對主導地位”,隨時可能會后來居上。原因在于,阿里巴巴近期開始申請爆量專利,今年迄今所發表的區塊鏈專利已超過 200 項,是 IBM 的十倍。

再者,阿里巴巴僅僅是在 2020 年上半年的專利數量就超過了 2019 年全年;而 2019 年區塊鏈的專利數量亦是 2018 年的三倍。研究預計,若阿里巴巴能依照目前的速度發展,2020 年底將成為區塊鏈領域最大的專利持有者。

不過,若依國家排名來看,美國擁有 2,112 項區塊鏈專利;其次則是開曼群島(注:阿里巴巴注冊在英國開曼群島)擁有 350 項專利,加拿大擁有 118 項專利。排名前六位的其余國家是日本擁有 108 項專利,韓國擁有 87 項專利,中國只有 77 項專利。(郵箱網)[2021/8/30 22:45:49]

市場前景展望

灰度CEO:資管規模超500億美元,將在數月內超過全球最大的大宗商品ETF:4月15日,據灰度(Grayscale)官方數據顯示,截止4月14日其資產管理規模持續增長,已超過500億美元,僅次于全球最大的大宗商品ETFSPDRGoldShares的570億美元。據此前報道,灰度一直致力于將其下比特幣信托基金GBTC轉換為ETF。如果該ETF獲得批準,灰度將成為僅次于SPDRGoldShares的第二大大宗商品ETF。GLD是一只實物支持的黃金交易所交易基金,已在美國、墨西哥、新加坡、日本和香港上市。

灰度首席執行官MichaelSonnenshein近日在推特上表示,他認為Grayscale比特幣基金(簡稱GBTC)的資產規模可能會在幾個月內超過GLD基金灰度已經是美國最大的數字資產管理公司,排名第二的Pantera僅持有43億美元的資產,不到灰度管理的500億美元資產的十分之一。根據官方數據顯示,灰度向機構投資者提供加密貨幣敞口,現在總共持有約66萬比特幣(BTC),占1868萬比特幣流通供應量的3.5%。其中近65.5萬美元由Grayscale的比特幣信托基金持有。[2021/4/15 20:23:47]

現場 | 清華X-lab鐘宏:DCEP真正的目標是成為全球最多人口的數字化支付體系:金色財經現場報道,2020年1月12日,“2020傳媒區塊鏈高級研討會暨傳媒區塊鏈產業智庫籌備會”在中國人民大學明德樓召開。該活動由區塊鏈產業智庫、中國人民大學新聞學院現代廣告研究中心、清華大學技術創新研究中心、《媒介》雜志社、國研智庫&清華x-lab數權經濟實驗室以及區塊鏈產業人才研究所等機構聯合舉辦。清華X-lab青藤鏈研究院院長鐘宏在會上表示,區塊鏈是一個跨學科、跨領域復合型技術,傳播學是區塊鏈技術的基礎學科之一,區塊鏈本質上是實現“數字化可信傳播”。他還談到央行的DCEP,他表示,Facebook宣布發起Libra之后央行加速推動DCEP,DCEP真正的目標是成為全球最多人口的數字化支付體系。在談到習總書記1024講話時,他表示,陳純院士講的是聯盟鏈技術,公鏈不一定適合在中國發展,公鏈無法在網信辦備案。中國特色的區塊鏈技術將構建下一代的數字長城。[2020/1/12]

很多嘉賓在分享的時候,都反復強調數據對于人們生活的影響。從增量來看,2002年前產生的數據量總計23個EB,而今年每五個小時就可以產生23個EB的數據,現在是數據爆發式增長的時代。

動態 | 全球最大交易商間經紀商計劃交易比特幣衍生品:據彭博社報道,全球最大的交易商間經紀商TP?ICAP宣布進入加密業務,充當希望買賣比特幣期貨的客戶之間的中間人。該公司的新合資企業由Simon Forster和Duncan Trenholme在倫敦運營,預計將增加與比特幣相關的無本金交割遠期合約,并計劃在亞洲和美國開設交易臺。TP?ICAP將首先從現金結算期貨合約開始,該合約在CME管理的受監管公共市場上交易。TP ICAP的歐洲、中東和非洲首席執行官Frits Vogels表示,希望通過該公司訪問數字資產的客戶必須通過其身份和反洗錢檢查。ICAP還在探索各種數字資產,包括加密貨幣和代幣化資產,該公司不排除未來在基礎市場上進行交易。[2019/6/18]

分布式存儲應運而生。其實分布式文件系統出現的時間很早,20年前銀行就在大規模使用。還有P2P網絡,大家應該使用過BT下載,這并不是新的概念。但是時代賦予了我們新的應用場景,現在我們面對每年產生的數據高達175ZB的新時代。我們需要思考,通過什么形式保存這些數據,以及挖掘這些數據的價值。

全球最大的以太坊錢包imToken宣布完成1000萬美元A輪融資,IDG資本是唯一投資方:2018年5月31日,全球最大的以太坊錢包imToken宣布獲得IDG資本1000萬美元的A輪投資。IDG資本是全球知名的股權投資機構,也是區塊鏈生態投資的領頭基金,投資了包括 Circle、Coinbase、比特大陸、Ripple等在內的多個全球知名區塊鏈公司。[2018/5/31]

石油存儲在地下對我們來說一文不值,數據也是如此,只有當我們能夠訪問數據,處理數據的時候,數據本身才是有價值的。IPFS這類存儲項目的優勢就在于,我們可以把更廣范圍、更深層次的數據保存下來,哪怕今天并不知道這些數據可能會產生怎樣的價值。

數據究竟從哪些維度對生活產生影響?一是智能網聯車,它之所以智能是因為系統通過各種傳感器,包括毫米波雷達、激光雷達、攝像頭對采集回來的數據進行分析,賦予更加智能的特點,每輛車跑一天的數據量超過1PB;二是工廠里應用大數據,可以將傳統制造業的效率提高70%;三是智慧城市,可以通過數據分析改善安全、公共設施利用率和交通管理效率。我經常舉一個例子,如果把記者丟到北京街頭,不戴帽子或者口罩的情況下,通過智能攝像頭找到他連5分鐘都不需要。

新技術的落地

對于希捷而言,硬盤做了40年依然可以有很多創新。機械硬盤今年容量是18T,明年容量到20T,后年容量會達到24T。為了使硬盤應對每年35%左右的年化增長率,需要通過激光熱輔助的技術加熱碟片上某一點,產生避雷針效應后把數據寫進去。有了這個技術硬盤碟片容量增長率每年可達35%,預計到2025年硬盤容量會達到50TB。

SSD的發展也非常迅猛,這符合八二定律的特點。我們知道80%的在存數據訪問頻率并不高,這就是為什么數據中心超過75%的數據存儲在機械硬盤上。IPFS是以一個存儲冷數據為主的網絡,冷數據存儲正應了機械硬盤的特點。

還有很多數據類型,比如熱數據、超熱數據、冷數據、冰數據,不在的今天討論范圍。熱輔助技術研制超過20年,當年有很多小故事。大家知道在華爾街,我們需要給投資銀行家講故事。SSD被發明以后,很多分析師認為機械硬盤沒有未來。當年希捷給華爾街演示熱輔助技術,傳感器使用的還是黃金,一個兩百納米大小的黃金,在被激光反復加熱以后,黃金有可能會熔化,而且分布時間是不均勻的,換句話說這個機械硬盤不知道會在什么時間失效。

經過20年的研發,現在每個機械硬盤寫入的數據量,熱輔助盤超過4個PB,遠遠超過大家所用的企業級硬盤每年550個TB的水平,平均失效率可以控制在0.4%。這是熱輔助硬盤的特點之一,磁頭上有一個亮點,是激光發生器,功率大概是零點幾毫瓦,用激光擊中碟片的時候加熱,就可以把數據寫進去。

雙磁臂是指兩個磁臂同時使用,性能可以翻倍,大家可以理解為將兩個機械硬盤做進一個盤體里面。

產品組合

簡單給大家秀一下希捷的產品組合,碟片方面有HDD,就是大家在存儲礦機上面使用的規格。還有SSD,覆蓋了大家所使用的各類接口。

大家有沒有聽說過“近存儲計算”的概念,國內外不少廠家在做這方面的研究。數據中心從集中式結構演變成分布式結構以后,每個結點之間都會產生大量東西向的數據流動。對于網絡而言,這是一種極大的開銷。“近存儲計算”階段就是在SSD上面內置一個計算引擎。HDFS也是分布式存儲系統,需要對數據進行壓縮。如果在SSD內置一個引擎,就不需要跟CPU綁定,不需要采購這樣一個硬件,效率會得到極大提升。這是大佬需要思考的問題,在這里就不展開了。

對希捷而言,目前的策略是模塊化。大家知道希捷是做盤的廠家,收購了若干廠商以后,希捷也具備了制造機架,以及控制器模塊的能力。就像是搭建樂高積木的時候,可以選擇不同的積木,希捷也是這樣的策略。根據冷數據或者熱數據的需求,以及定制化數據處理模式的機器,搭配不同的盤、不同的機架、不同的控制器模塊達到所需要的產品形態。

對于IPFS存儲的思考

分享一下我個人對于IPFS存儲的思考,我注意到今天參與活動的規格差異非常大。對于希捷而言,從P1到C2的過程并不是我們關心的階段。現在有很多礦機是所謂的緊耦合的結構,就是把上面這幾個階段統統放在一個盒子里處理。

如果法律階段要明確這個東西的產權,這是好的解決方案。但是從大規模集群而言,這個形式會帶來很大的問題,P1需要綁定AMD的CPU,但是供應能力是不足的。如果所有東西放在一個盒子里,沒有辦法實現彈性擴展。要么就是存儲先耗盡,要么就是計算能力先耗盡,沒有辦法對資源做單獨擴展,這和分布式架構是相悖的結構。

對各個階段做一個解耦,大家參考所有云服務廠家可以看到,面對不同的存儲場景,熱數據、冷數據、冰數據都有相應的存儲解決方案。IPFS沒有辦法回避這個事情,就是一定要做解耦。這樣做的好處是每個階段都可以做單獨的橫向擴展,提升硬件利用率。現在專用硬件的采購量并不需要那么大,同時上線節奏可以極大加快。

IPFS本身不具備數據高可用的機制,怎么在大規模存儲集群里確保數據在每24小時時空證明階段在線,這是沒有辦法回避的一點。我看到有一些礦機是單路電源,在存儲集群密度高的情況下,掉線任何一個節點的數據損失都很大,沒辦法在25秒以內返回結果,懲罰可能大于挖礦的收益。

我做了十多年的企業級,知道有多么困難。舉個例子,如果用一個10T的盤做數據重建需要50多個小時,在這期間再出現掉盤的情況,那么整個邏輯卷就會失去訪問。如果使用我們的RBOD,就可以在RBOD上做好數據保護,再通過以太網或者SAS電纜映射給主機,高可用是在RBOD上面管理,對于用戶而言,可以減少很多這方面的痛苦。如果前面沒有太多思考,后面做礦池就會遇到很多痛苦的懲罰。

我建議大家在存儲這方面,一是盡可能使用大容量的HDD,二是把高可用機制卸載到存儲設備商。這時候RBOD的形態比JBOD的形態更好,因為有希捷自己的糾刪芯片。

今天關于希捷產品還有IPFS的思考和分享就這么多,謝謝大家。

Tags:區塊鏈比特幣SSDETF區塊鏈的未來發展前景ppt一個比特幣要挖多久視頻SSD幣METFI

MANA
以車庫出租為例,講解如何實現分布式存儲_COIN

今天我們以Filecoin為例,講解怎么實現分布式存儲?為什么以Filecoin為例來講解分布式存儲,因為就目前來看團隊實力最強,融資最多,呼聲最高的就是這個項目.

1900/1/1 0:00:00
比特幣持倉周報:大型機構秀操作,激進清倉空單展現極強看漲信心_比特幣

8月29日,CFTC公布了最新一期的CME比特幣期貨周報,最新統計周期內BTC出現了近1000美元的大幅回調,前一波反彈取得的漲幅幾乎遭到全數回吐.

1900/1/1 0:00:00
觀察丨如何對比DeFi項目的去中心化程度?_EFI

如今DeFi代幣價格飛漲,在短短兩年時間里,DeFi項目市值迅速飆升到數十億美元。就在整個生態系統充斥了泡沫的同時,也不乏一些極具韌性的產品.

1900/1/1 0:00:00
波卡值得投資嗎?本輪行情可以持續多久?_DEF

這兩天板塊的輪動效應出現了,波卡及其生態內的代幣和同為跨鏈題材的ATOM等出現了暴漲。于是網上很多朋友問波卡及ATOM等代幣是否值得投資?關于一個項目的代幣是否值得投資,我在8月15日的文章《面.

1900/1/1 0:00:00
比特幣一舉突破12000美元,創13個月以來新高_比特幣

據比推數據,市值最高的加密貨幣比特幣周二凌晨一舉突破12000美元上方的阻力位,創下過去13個月來的高點.

1900/1/1 0:00:00
注意,Uniswap 被拆解不可避免!這對 DeFi 意味著什么?_EFI

轉自: 鏈聞 撰文:HaseebQureshi,區塊鏈風險投資機構DragonflyCapital管理合伙人編譯:PerryWangUniswap?目前是去中心化金融 領域最大的「 交易所」.

1900/1/1 0:00:00
ads