木星链 木星链
Ctrl+D收藏木星链

FIL:IPFS分布式存储研究报告

作者:

时间:1900/1/1 0:00:00

分布式存储是2020年区块链行业最热门的主题之一,该领域除了最热门项目

IPFS/Filecoin主网10月上线带来整个分布式存储行业热度和流量快速上升,另外赛道也涌现出很多新的分布式存储项目,包括波卡生态分布式存储项目CrustNetwork、永久存储区块链项目Arweave紧随IPFS步伐也推出各自的主网,这些存储新星和老牌分布式存储项目Storj、Sia一起,共同为区块链分布式存储生态贡献力量,扩大分布式存储的生态版图。

作为一种分布式的信息基础设施,区块链分布式存储系统通过将文件或文件集存储在不

同的存储空间比如硬盘上,在链上同时生成文件存储确权证明,通过激励机制来激励存储空

间的提供方,区块链分布式存储在数据隐私、透明度、确权方面相比传统云存储都具有优势,

加上数据存储市场本身天花板高,赛道从长期看具有足够的想象力,分布式存储也是区块链

圈内外都普遍关注的方向,成功捕获了大量圈外流量,基于区块链的分布式存储项目赢得了

密切关注,传统行业和资本已经通过直接投资或者间接的方式加入到分布式存储阵营的角逐

中。

??海量非结构化数据存储的技术挑战

随着社交网络、移动互联网和物联网的兴起,互联网信息爆炸式增长产生了海量数据,

数据量级也从最初的GB、TB逐渐发展到PB、EB甚至更高。数据类

型从简单的文本扩展到了复杂高维度数据,比如半结构化数据、图片数据、视频数据、传感

器数据和流数据等。

根据研究机构IDC预测,2018年到2025年之间,全球产生的数据量将会从33ZB增

长到175ZB,复合增长率达到27%,其中超过80%的数据都会是处理难度较大的非结构

币安杠杆将下架CKB/BUSD、CTK/BUSD等逐仓杠杆交易对:金色财经报道,据官方公告,币安杠杆将于2023年08月03日14:00(东八区时间)移除CKB/BUSD、CTK/BUSD、ELF/BUSD、FOR/BUSD、PERP/BUSD、SKL/BUSD、UNFI/BUSD逐仓杠杆杆交易对。

注意:

币安杠杆交易平台将于2023年07月26日14:00(东八区时间)暂停CKB/BUSD、CTK/BUSD、ELF/BUSD、FOR/BUSD、PERP/BUSD、SKL/BUSD、UNFI/BUSD逐仓杠杆的借贷业务;

币安杠杆交易平台将于2023年08月03日14:00(东八区时间)对CKB/BUSD、CTK/BUSD、ELF/BUSD、FOR/BUSD、PERP/BUSD、SKL/BUSD、UNFI/BUSD逐仓杠杆仓位进行自动平仓和清算,取消用户在逐仓交易对上的所有挂单。此后,将从逐仓杠杆中下架以上逐仓交易对。

在下架过程中,用户将无法更新仓位,强烈建议用户在2023年08月03日14:00(东八区时间)停止杠杆交易前平仓和/或把资产从杠杆钱包划转到现货钱包,币安将不对任何潜在损失负责。[2023/7/25 15:57:10]

化数据。预计到2030年全球数据总量将进一步达到3,5000EB。

海量非结构化数据带来的存储挑战主要在于如果采用传统集中式存储的Scale-Up的扩

展方式,这种纵向扩展架构处理海量数据环境中会存在扩展成本高、耗时长、难度大的问题,

性能与容量无法灵活扩展,造成扩容成本较高。

而采用Scale-Out架构,通过分布式接入技术将独立的低成本存储节点组成一个大而强

的存储系统。通过添加存储节点来进行处理和存储能力的扩展。目前的云存储系统也是通过

德国银行巨头DekaBank将向客户提供比特币和加密货币:金色财经报道,德国银行巨头DekaBank将向150万零售客户和500个机构客户提供比特币和加密货币。DekaBank重点将放在托管上。据悉,DekaBank管理着4280亿美元的资产。[2023/2/1 11:41:02]

分布式接入扩展储存容量已经可以达到PB级,每增加一个存储节点,性能和容量同时增长,大大降低了存储系统采购、部署和升级的成本。

于区块链的分布式存储的优势

传统云存储基于「分布式文件系统」存储文档、图像、视频等非结构化数据。典型的分

布式文件存储系统像Google的GoogleFileSystem。GFS是Google分布式存储的基

石,是构建在廉价服务器之上的大型分布式系统。GFS的基本架构如下图

GFS系统包含三类节点角色:GFSMaster、GFSChunkServer(CS,数据

块服务器)以及GFS客户。主控服务器中维护系统元数据,包括文件及chunk命名空间、

文件到chunk之间的映射、chunk位置信息。主控服务器是性能最好的节点之一,很少有性

能瓶颈,还存在备份服务器节点作为主服务器的镜像。

虽然这种存储系统将数据分散存储在多个存储节点实现较好扩展性,但因为元数据被保

存在中心节点。在存储和读取数据时,都需要访问中心节点来获取元数据信息,也存在一些

弊端,比较明显的问题包括:

??元数据安全问题

如果中心节点发生故障或宕机,那么元数据无法被读取。虽然,通过引入备份节点可以

一定程度上避免该问题,但节点之间切换效率较低;云数据中心因为各种问题经常出现运行

Ripple:SEC未能证明XRP销售是投资合同,要求法院批准简易判决动议:金色财经报道,Ripple Labs表示,在监管机构对其提起的诉讼中,美国证券交易委员会(SEC)无法证明该公司的XRP销售是投资合同。此前,美国证券交易委员会于2020年底起诉Ripple,指控其将XRP作为未注册证券出售。

在支持简易判决动议的答复中,Ripple律师表示,“SEC未能证明XRP的任何要约或销售都是联邦证券法规定的投资合同。即使是涉及金钱交换的交易,SEC也未能证明购买者像Howey要求的那样,将资金投资于一家普通企业,而不是简单地购买资产”。

据悉,Howey测试是指美国最高法院判定一项交易是否算作“投资合同”的案例,因此需要遵守1933年《证券法》和1934年《证券交易法》的披露和注册要求。Howey测试的关键要素之一是交易是否意味着预期从他人的工作中获利,Ripple表示SEC未能证明XRP购买中存在这种预期。[2022/12/5 21:22:40]

故障或数据丢失泄露等情况。

信任问题

存储元数据的节点可信性很难保证,元数据存在被篡改的可能性,中心节点由各大云存

储机构独立管理和运营,数据的可靠性和安全性完全依赖该机构的实力和信誉。如何保证用

户数据不被窃取使用,存储运营商难以保证。

区块链是一个分布式账本数据存储技术,使用P2P网络、加密算法、数据存储等要素共

同组成整个分布式账本,通过激励系统促使网络成员积极广播区块并进行数据维护,每一个

参与区块链运行的节点都可以复制一份完整的数据拷贝。除非有人能够同时控制住整个区块

链中的51%以上的节点,否则单个节点的数据篡改系统不会承认,这就确保了数据的不可篡

改。区块链用冗余存储保障了分布式存储系统的一致性与安全性。

区块链证券交易所ADDX完成2000万美元融资:11月16日消息,新加坡区块链证券交易所ADDX宣布完成2000万美元融资,韩国最大金融服务公司KB financial Group旗下经纪公司KB Securities领投。

据此前报道,今年5月,ADDX宣布完成5800万美元Pre-B轮融资,泰国证交所子公司SET Venture Holding、UOB、Hamilton Lane和Krungsri Finnovate参投。(福布斯)[2022/11/16 13:12:56]

从存储角度,区块链存储构建成一个规模巨大的全球统一、全球共享的存储池,将数据

分散在多处,来增强数据的可靠性、可用性、异地容灾性等特性。不同于分布式云存储有专

门的备份节点负责数据冗余,区块链所有的参与节点参与冗余存储。让存储成为区块链技术

的最佳落地应用场景。对于非代码和线下的事物,应用区块链的难度会很大。企业级数据中

心面临可靠性不足时,有人探讨将数据分布在多个数据中心,即把数据存储到全球上千万个

节点上来提高数据的安全可靠性,拜托单个数据中心被黑客攻击而出现的数据泄露问题。

目前已经发展出四类存储:桌面级存储、企业级存储、云存储(数

据中心)和区块链存储。与企业级存储、云存储相比,基于区块链分布式存储的优势主要体

现在以下方面:

可靠性更高,区块链存储将数据存储到成千上万个节点上,不是传统分布式存储的多副本模式,而是冗余编码,可以有效避免单点故障问题,比特币运行10年以来其分布式

账本数据库未被任何黑客攻破就是最好的可靠性证明。

??可用性更高,云存储即使采用多节点分布式存储方式,仍然可能出现因为节点宕机

美媒:特朗普或于当地时间7日晚宣布参加2024年总统选举:11月8日消息,据美国CNN电视台援引3名消息人士报道,美国前总统特朗普在积极讨论于当地时间7日晚宣布参加2024年总统选举的可能性。据消息人士向CNN透露,一旦共和党在8日的中期选举中夺回众议院或参议院的控制权,特朗普打算将功劳揽在自己身上。此前预计,特朗普会在中期选举之后、11月结束前正式宣布参选。(俄罗斯卫星通讯社)[2022/11/8 12:29:27]

或者中心节点负载过高故障问题而出现无法提供服务的情况,区块链只需要保证一定比例的

节点数量正常,系统服务就是可用的。

??边缘存储成本更低,区块链将存储成本分摊到边缘节点,相对搭建独立的数据存储

中心对硬件的需求和成本都更低。

??加密隐私性更高,中心化存储最终数据加密流程在企业内部完成。区块链存储数据

都经过加密,没有明文数据,加密过程由数据拥有者用户自己完成,只要用户保存好加密密

钥,就无法被第三方窃取到数据隐私。

分布式存储和区块链天然具有一定匹配性,两者都基于分布式系统。分布式存储作为链

下存储方案可以扩展区块链存储空间效率低的问题,比如可以将核心的交易元数据和实际数

据进行分离存储而非全链上存储,缓解链上账本空间膨胀的问题,元数据加密后存储链上,

实际数据本身通过分布式存储避免单一节点故障造成数据丢失问题,分布式存储可以优化区

块链的存储效率,释放链上存储空间存储更关键信息,同时又不影响区块链处理大数据时的

可用性。

IPFS?分布式存储和挖矿激励

星际文件系统由协议实验室创始

人JuanBenet提出,通过不同的设备连接建立一个「分布式文件系统」,使用「内容寻址」

18

方法将大文件分拆为数据块对象来提高存储效率,每个文件块通过对应块内容的哈希值索

引,建立全局的分布式散列表,通过MerkleDAG树数据结构

组织这些分散的文件块的哈希索引,将存储在树根节点位置的索引作为文件寻址哈希值。

IPFS结合了DHT、MerkleDAG、版本控制Git、自验证系统SFS,在点对点网络进行去

中心化的数据存储和交换,可以由用户自主设置数据访问和读写权限而不依赖信任主体,不

存在单点故障问题,上传到IPFS上的数据不可更改,数据变更将生成新的IPFS对象,并链接到之前的对象版本这种基于Git的版本管理可以很方便追踪数据更新情况。另外IPFS产品拥有类似TCP/IP一样的协议簇,可以同样按分层模型对IPFS产品分层,包括八层,产品每层功能都使用不同的协议。

????????????????????????????IPFS文件系统的主要技术

??????????????????????????????IPFS系统协议栈

总结来说,IPFS提供了在没有中心化服务器的前提下搭建一个全新的web网页的可能

性,只要节点贡献存储和计算资源来成为IPFS节点,就能实现这点,其本质是一个P2P的

内容分发网络,不同于HTTP的中心化分发模式,没有中心化问题,所以它一直被对标HTTP

致力为成为下一代互联网协议,但是IPFS要实现这个目标挑战非常大,在分布式环境下数

据存储可用性很大程度来自数据冗余备份,取决于节点积极存储备份,如果节点删除数据,

数据甚至可能出现丢失情况。

为了解决IPFS节点数量有限而影响网络性能的问题,协议实验室2017年发起Filecoin

项目,作为IPFS的激励层,模仿的是比特币的区块链激励模型,不同的是Filecoin挖矿放弃耗能的PoW(Proofs-of-Work),而是创建新的存储证明挖矿算法,即基于有效存储证明的复制证明和时空证明,基于存储挖矿的方式来激励存储节点在IPFS网络上贡献资源,矿工提供的有效存储空间并存储有效数据容量越大,最后获得挖矿奖励概率也越大,Filecoin的挖矿模式相比起来更环保、

效率也更高。Filecoin主网已经于2020年10月正式上线,从Filecoin官方区块链浏览器之一Filfox获取到的数据,目前全网存储算力已经达到1.85EB,算力前十的节点存储能力都是PB级别,算力占比分布来看,网络去中心化程度不低,活跃矿工节点数1059,矿工数量还不够多,尤其从区域分布看主要集中在亚洲国家,很多区域显示海外的可能也是VPN的影响;Filecoin主网目前区块高度达到404049,平均出块时间30s,另外Filecoin挖矿和其他PoW区块链项目提现出明显差异化的特征是它的质押挖矿,节点需要为有效算力提供FIL质押才能获得「挖矿权」,目前每个扇区大小32G需要质押0.27FIL,每新增1T算力,质押成本增加12.46FIL,从目前挖矿产出看,相当于43.4%的流通量是锁定状态,由于Filecoin总供应20亿,其流通率目前仅3.4%,随着更多的FIL进行流通,项目生态市值变化可能比较快。另外Filecoin目前网络运行的过程中也遭遇了网络Gas费率的问题,比如持续一段很长的时间费率达到4-6nanoFIL,Filecoin引进以太坊EIP1559案将Gas分为基础和附加两部分,基础部分会直接销毁,加速FIL的通缩,附加部分才会奖励打包矿工,而从目前的情况当Gas费率较高时,由于基础部分占比较高Filecoin矿工挖矿收益扣除支付的Gas可能会导致收益下降甚至为负的情况,而Gas费高企的背后是Filecoin在Gas费率设置了类似比特币挖矿那样的难度调整,Filecoin矿工挖矿过程即封装数据并将消息上链都会涉及Gas费用支付的问题。随着加入Filecoin网络的矿工数量上升,不光挖矿收益已经从0.25FIL/TiB下降到目前的0.13FIL/TiB,由于目前处理的交易消息大概每秒14笔,可能低于实际需求量,也是导致矿工Gas费率的上升的原因。Gas费持续高位将不利于矿工提高算力参与网络,协议实验室最近也是在FIP-9方案中加入提交时空证明阶段免除矿工基础费用的新政策来降低矿工Gas压力。

???????????????????????????Filecoin网络情况

????????????????????????Filecoin矿池算力排行榜

Filecoin网络出现Gas费较高情况

总体来看,目前Filecoin区块链目前还处在矿工如何通过提高有效算力来挖矿的阶段,

并没有在「为用户提供低成本高效存储服务」上有很多的动作,矿工和官方之间几乎不可避

免经常陷入博弈的状态。如果从Filecoin网络效用而言,协议实验室从一开始就非常排斥矿工牺牲网络来为自身牟利的各种行为,所以设置各种处罚机制,硬是把节点挖矿变成了一项复杂困难的生意,矿工如果不留意违规可能面临出局的风险,因为Filecoin挖矿并不像比特币那样自由。Filecoin矿工未来的收益当然可以不仅仅来自存储挖矿奖励,比如还有Gas手续费收入、检索收入,但目前阶段在FIL币价稳定在可观的水平上,努力封装数据提高算力才是王道,可随着更多的玩家进入,算力收益一定会下降,算进其他成本项,FIL挖矿没有那么多「暴富神话」,如果要继续留守在赛道,就需要真正考虑能提供真正的商业价值,FIL挖矿不能当纯金融来玩,目前官方在算力增长方面明显开始倾向用户存储订单的数据,网络公开验证人作为「数据质量检察官」,这样的数据在矿工算力贡献方面就是十倍的增长。另外从未来几年的发展目标,Filecoin目前的挖矿算法在性能方面不能匹配大量数据存储和检索的需求,需要调整来满足未来检索市场的发展,所以下阶段可能在会封装数据环节进行新的算法迭代来提高矿工提交证明消息的速度。Filecoin生态的构建对于项目成功也是非常关键,以太坊和波卡的成功基础都在于生态,目前Filecoin作为一条存储公链,而不是计算公链,后面也要上线自己的智能合约,如何结合自身定位来发展生态也是接下来项目进展的重要方向。

??小结

面对未来海量高并发的数据存储和计算需求,分布式存储是当下重要的发展趋势之一,

传统的分布式文件存储方式仍然存在单点信任问题,基于区块链的分布式存储在可靠性、可

用性、成本和数据隐私方面具有优势,这方面像IPFS/Filecoin通过将比特币的工作量证明激励模型模式迁移到提供数据存储服务的场景,设计了新的挖矿机制来保障区块链存储网络的安全,另外像CrustNetwork、Arweave、Storj、Sia这些分布式存储赛道的项目也都从不同的角度来发展分布式存储,体现一定的差异化,回到商业本质,未来分布式存储项目的竞争力一定体现在用户数量和存储生态建设上。

来源:金色财经

标签:FIL区块链FILEOINfilecoin币最新消息11月16日区块链是什么多选题Filecoin 36Monthcoinhot

币安app官网下载热门资讯
FTX:3.13 ETH行情走势分析点位分享

聪明的交易者会对每笔交易设置止损,随着账面的不断浮盈会进行移动止损。止损的目的有两个:一是否定自己的交易方向,二是否定自己的交易时机.

1900/1/1 0:00:00
URUS:金色趋势丨BTC回撤蓄力 酝酿后续突破

根据欧易OKEx交易大数据,BTC合约多空持仓人数比为0.99,市场做空人数占据优势;季度合约基差在600美元上方,永续合约资金费率为正,交割及永续合约持仓总量为28亿美元.

1900/1/1 0:00:00
INS:3.13 BTC最新技术走势解析

昨日走势完美把握住了高低点,加上视频讲解中给到的57300布局空单,三单利润超过3000点利润!近两天整体会走一个来回震荡大洗盘的走势,洗去不坚定的人,上方依然重要承压58000一线位置.

1900/1/1 0:00:00
DAO:3.13ETH以太坊行情分析

大家好,我是宇辰论币,喊单在于精准,做单在于稳定,分析在于全面,建议在于专业,做人在于诚信。没有一成不变的市场,只有不懂灵活操控的人!机遇稍纵即逝,交易暗藏风险,有时候等你看明白了,一切也都成历.

1900/1/1 0:00:00
BAYC:谈喻凯:3.12无惧历史暴跌日 比特币以太坊操作建议及空单解套

    比特币:“买预期卖事实”,谈老师觉得这是对市场先知遇见的反映,特别是312历史暴跌日带给市场的恐慌情绪.

1900/1/1 0:00:00
CRYPT:程博说币:3/13 以太坊实操带单 多空获利103个点位 以较小的风险博取较大的收益

口说不如身逢,耳闻不如目见,留得五湖明月在,不愁无处下金钩,闹里有钱,静外安身,酒中不语真君子,财上分明大丈夫.

1900/1/1 0:00:00