比特幣交易所 比特幣交易所
Ctrl+D 比特幣交易所
ads
首頁 > SOL > Info

冗余策略:雙副本與糾刪碼該如何選擇?_FILE

Author:

Time:1900/1/1 0:00:00

Filecoin主網的上線后,存儲的數據呈爆炸式增長,如今全網有效算力已經達到了1.40EiB,海量數據的安全存儲給礦工帶來了巨大的挑戰。

關注Filecoin的小伙伴們近兩天可能看到過這兩個賬戶的圖片,這兩個賬戶都是之前排名靠前的節點,可是現在賬戶顯示可用余額為負幾萬FIL-十幾萬FIL,質押幣被罰沒,出塊獎勵被罰沒,損失折合人民幣數千萬元,出現這樣的狀況非常可惜。

扇區生命周期是180-540天,在這期間內我們要不斷地進行時空證明,來驗證數據存儲的安全無誤,如果提交的數據有誤或者沒有在時間內提交就會報錯,如果14天內還沒有提交上來正確的數據,就會觸發非常嚴重的罰沒機制!

DWF Labs加入2500萬美元TON加速器計劃:6月15日消息,Telegram開發的Layer1區塊鏈TON宣布DWF Labs加入其2500萬美元的TON加速器計劃,DWF Labs將為TON生態系統的代幣經濟學、做市和流動性提供做出貢獻。[2023/6/15 21:39:52]

所以存儲方案對于Filecoin挖礦非常重要!

普通的硬盤存儲是很危險的。硬盤在存儲實際使用過程中年故障率一般在2%上下,這意味著100塊硬盤中,平均每年會故障2塊,硬盤故障率是非常高的,我們可以看下圖的浴缸曲線,硬盤在剛上線時故障風險更大,更遠高于平均故障率。

這說明我們存儲打包的數據是很容易因硬盤損壞而丟失,僅僅靠硬盤存儲很難保證可以在扇區生命周期內存儲數據的安全。

Gemini宣布與金融咨詢公司Betterment合作:金色財經報道,加密貨幣平臺Gemini宣布與金融咨詢公司 Betterment 合作。通過合作,Gemini 將擔任 Betterment 的加密貨幣保管人,使這家金融咨詢公司能夠為其客戶群開放加密貨幣訪問權限,該客戶群超過 730,000 名用戶。Betterment 客戶將從 10 月開始訪問加密投資組合。[2022/9/27 22:34:24]

圖:浴缸曲線

所以冗余保護策略就變得非常必要。

多副本和糾刪碼是目前分布式存儲系統中常用的兩種數據冗余保護策略,也就是保護我們數據安全的兩項技術。

注:分布式存儲系統中的CAP原則,Consistency、Availability、PartiTIontolerance,對于可用性來說常見的兩種技術是多副本和糾刪碼。

多副本與糾刪碼分別是什么

StarkWare:StarkEx V4.5被指出存在漏洞,現已修復:9月9日消息,零知識證明研發機構StarkWare發推稱,其擴容引擎StarkEx V4.5被Vlad Bochok(Matter Labs工程師)和Ihor Barenblat指出存在漏洞,在運營者控制的條件下,該漏洞可使用戶能夠從一個凍結系統的Vault中雙花。不過,目前該漏洞已被修復。[2022/9/9 13:19:00]

多副本就是把數據復制成多份并分別存儲到不同地方以實現冗余備份。以雙副本為例,雙副本顧名思義就是數據存儲為兩個副本,當某個副本丟失時,可以通過另一個副本復制恢復數據。

糾刪碼主要是通過糾刪碼算法將原始的數據進行編碼得到冗余,它將數據分割成片段,把冗余數據塊擴展、編碼,并將其存儲在不同的位置,并將數據和冗余一并存儲起來,以達到容錯的目的。

糾刪碼最早是在通信行業解決部分數據在傳輸中損耗的問題,它的基本原理是把傳輸的信號分段,加入一定的校驗再讓各段間發生一定的聯系,即使在傳輸過程中丟失掉部分信號,接收端仍然能通過算法把完整的信息計算出來。糾刪碼技術本身更多是用于傳輸,而并不是存儲。

Snackclub游戲DAO以1億美元的估值籌集資金:金色財經報道,據三位消息人士透露,區塊鏈游戲社區Snackclub的DAO將以1億美元的完全稀釋估值完成 A 輪融資。??

根據同一消息來源,DAO正在尋求通過私人代幣銷售籌集 700 萬美元。完全稀釋后的估值數字是通過將流通中的代幣數量乘以價格來計算的。目前尚不清楚此次銷售中有多少代幣可用。Snackclub 的?聯合創始人 Angelo Cazzola?以書面形式確認了正在進行的 700 萬美元融資,?他補充說,大部分資金已經籌集到,該輪融資將于下周末結束。?[2022/8/17 12:31:54]

多副本與糾刪碼技術如何選擇

多副本與糾刪碼技術在不同的應用場景下有各自的優勢。

1.存儲利用率

多副本是復制多份分別存儲到不同地方以實現冗余備份,比如雙副本磁盤利用率只有50%,冗余度很高,這帶來了巨大的額外存儲空間消耗,無形中提高了很大的成本,但它更安全、讀寫更快。

“星火杯”首款數字藏品《激流·勇者》5月19日正式發行:5月16日消息,5月19日16點,中關村區塊鏈產業聯盟將在靈境藏品平臺,正式發行“星火杯”首款數字藏品《激流·勇者》。此次中關村區塊鏈產業聯盟將為首屆“星火杯”區塊鏈應用大賽打造兩款系列數字藏品,在全國區域復賽開賽之際,發布第一款數字藏品《激流·勇者》。本作品展示了以“中關村區塊鏈產業聯盟”標志星球作為起源地。[2022/5/16 3:18:13]

糾刪碼技術不需要完整寫入真實數據的副本,它主要是通過糾刪碼算法將原始的數據進行編碼得到冗余,并將數據和冗余一并存儲起來,以達到容錯的目的。其基本思想是將n塊原始的數據元素通過一定的計算,得到m塊冗余元素。對于這n+m塊的元素,當其中任意的少于m塊元素出錯時,均可以通過對應的重構算法恢復出原來的n塊數據。生成校驗的過程被稱為編碼,恢復丟失數據塊的過程被稱為解碼。磁盤利用率為n/(n+m)。與雙副本方法相比具有磁盤利用率高等優點。

附:容量空間對比

2.容錯性

雙副本很好理解就是存一份,備份一份,容錯性比較好。雙副本在部分數據丟失后可以從另一個副本復制出來損失的數據,恢復正常使用。

糾刪碼技術本質就是計算,如果出現數據丟失,糾刪碼技術做的是把丟失的數據計算出來,而計算是需要一些已知的量再進行運算的,當數據丟失多的話,是無法計算的。容錯性比起副本有一定差距,

放到實際情況來講,當糾刪碼設置4/1情況下,節點或者數據塊故障,數據恢復需要讀取3個數據塊和1個校驗,也就是說這5項損壞了任意2項的數據塊,數據就無法計算找回,就造成信息丟失、無法找回的嚴重后果。

3.可靠性對比

雙副本有兩份數據,可以允許任意一個數據塊損壞。

糾刪碼配置一個數據塊配備一個校驗位時才能提供和雙副本近似的可靠性。

4.數據恢復對性能影響及恢復效率

雙副本下,一個節點或者數據塊故障,數據恢復直接從另一個副本讀取、寫入,一次進行恢復副本,影響一個節點的讀取性能。恢復效率較高。

糾刪碼設置4/1情況下,一個節點或者數據塊故障,數據恢復需要讀取三個數據塊和一個校驗,通過運算后寫入一次進行數據恢復,影響四個節點的讀取性能。恢復效率較低。

5.寫懲罰

雙副本下,某個節點的一次數據寫入,實際需要兩個節點參與,寫懲罰為2。

糾刪碼設置4/1情況下,一次數據寫入,實際需要至少兩個節點參與,其中讀取兩次,寫入兩次,寫懲罰為4。

6.CPU開銷

雙副本是基于數據完整復制,幾乎沒有計算的開銷,對CPU開銷較低。

糾刪碼由于讀寫都需要計算校驗值,有較高的計算開銷,需要額外的CPU資源開銷。

7.這兩項技術如何選擇

副本技術可以更好的保證數據的安全性,提升讀寫效率。一般適用于關鍵業務,對性能要求比較高,網絡對數據出錯容忍度極低的業務,如數據庫等。

糾刪碼則可以提高存儲系統利用率,降低成本。一般適用于其他非關鍵性業務,如視頻監控等,部分數據塊的損壞不會影響信息的傳遞。

結語

Filecoin挖礦中最為核心的就是存儲,在存儲上省錢,如果有一天出了問題,賠了夫人又折兵。在當前副本策略在安全性上無疑是更優的,盡管成本很高,但對我們挖礦中的數據的安全是一個重要保障,備份冗余并不是浪費,而是非常必要的。

當前Filecoin挖礦熱度依然很高,市場魚龍混雜,充斥著各種各樣的Filecoin挖礦產品。比如市場上相同價格可能有80%利用率的產品,也有雙副本50%利用率的產品,要如何選擇呢?投資Filecoin挖礦產品絕對不能只看售賣價格,作為投資人一定要有一個投資標準,很多技術問題可能很難去理解和分析,但我們可以化繁為簡比較每萬元收益,畢竟拿到手里的收益才是最實在的。

Tags:FILOINFilecoinFILEfil幣交易費是多少Streamr DATAcoinQFilecoinfile幣未來價格

SOL
賣意外險的保險公司也遭受了意外?Cover Protocol漏洞分析_COVER

北京時間12月28日晚,CertiK安全驗證團隊發現CoverProtocol發生代幣無限增發漏洞攻擊。本文為你分析事件詳情始末.

1900/1/1 0:00:00
如何核算Filecoin網絡上的Gas費_GAS

之前撰寫了一篇《一文讀懂FilecoinGas費供需現狀與超額燃燒》文章,收到一些用戶的反饋。基于有部分用戶不太理解如何運用該公式,這次我們分享一下如何一步步核算Gas費,從礦工的角度來看如何支.

1900/1/1 0:00:00
科普 | 以太坊擴容之Layer-2 Rollup擴容解決方案的探討_LAYER

在2020年5月,以太坊網絡上出現了所謂的“黑色星期四”:以太坊變得過于擁擠,以至于MakerDAO無法按照預期進行工作.

1900/1/1 0:00:00
從 AC 的 DeFi 生態版圖擴張看 DEX 的進擊之路_DEF

世界上從未有一個行業的發展速度能達到DeFi的水平。DeFi的創新之所以能以最快的速度發展,主要得益于DeFi的可組合性、可擴展性,這意味著任何人都可以借鑒他人的創新,然后像搭樂高一樣,將兩組甚.

1900/1/1 0:00:00
ETH 2.0 來了,目前還可以購買礦機挖 ETH 嗎?_ETH

大家好,我是Keven,萊比特礦池產品經理,也是一名小礦工。我本人持有比特幣和以太坊礦機,最近又加倉了一些以太坊礦機.

1900/1/1 0:00:00
歐洲主權財富基金SRIW參投,區塊鏈風險投資公司Tioga Capital融資1700萬美元_SRI

據TheBlockCrypto12月17日報道,管理著價值約40億美元資產的比利時主權財富基金SRIWGroup剛剛投資了區塊鏈風險投資公司TiogaCapital.

1900/1/1 0:00:00
ads