专访DSP协议周炎:分布式存储的发展需与5GIoT并行演进 |链捕手
Posted 链捕手
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了专访DSP协议周炎:分布式存储的发展需与5GIoT并行演进 |链捕手相关的知识,希望对你有一定的参考价值。
分布式存储的赛道在区块链行业长期以来备受关注,特别是Filecoin已经成为今年最为火热的项目之一,同时更多的挑战者正在加入该赛道。由Onchain团队研发的DSP协议则是其中之一,该项目致力于成为基于数据文件加密、分发、存储、共享等多维度的新一代互联网协议范式,自18年立项以来该项目已基本开发完毕,目前处于测试阶段。
近期,我们与DSP协议负责人周炎进行了深度专访,聊了聊IPFS协议的发展缺陷、DSP协议针对分布式存储的具体解决方案,以及对合规、行业趋势等问题的看法,相信会对关注该领域的读者们有所启发。
作者|龚荃宇
01
IPFS与DSP协议的不同轨道
链捕手:从公开资料来看,DSP协议要做的事情跟IPFS协议维度相似,都是做分布式存储,你们如何看待如今很火的IPFS协议以及Filecoin项目?
周炎:一开始的时候我们很看好IPFS,对于它的愿景十分认可,并且他们有很好的技术团队支撑。我们也会定期追踪他们的项目进度,同时也可以促进对我们自己项目方案的反思。不过IPFS由于缺乏激励机制仍然处在实验性阶段,无法大规模商用。当然这也是Filecoin诞生的原因。
Filecoin通过矿机生态创造了一个非常庞大的市场,包括硬件、矿机、云算力、矿池等,项目方虽然没有在国内投过钱,但激励了大量参与者给它做免费传播,几乎针对每个资金体量的群体都涉及了参与方案,例如你有10万块钱就可以买云算力;你有10万到50万就可以买矿机;你有50-100万可以做分销提成;你有100万到300万就可以分享矿池治理费用。
现在整个市场的资金体量已经达到上百亿,而且全部都是期货。对于这么多参与者与资金,他们也等于压注在未来的C端用户市场上,所以未来需要大量的用户进行有效数据的存储同时,需要进行持续的算力购买。这部分还是具有一定的不确定性。
链捕手:那你们怎么看待IPFS的技术代码?
周炎:单从它的技术代码来看,密码学、共识机制、时空证明等技术都不错,但这些都还停留于实验室环境的科研成果,距离一个可商用的生态底层技术平台还有一定的距离。
我们将数据类型分为两类,一种是热数据,即需要被计算节点频繁访问的在线类数据,另一种是冷数据,即不经常访问的离线类数据,像IPFS现在更多是针对冷数据的存储,但当前的互联网时代里本身除了冷数据还会有热数据等多种数据类型的存在与需求,只单独做一类数据并不能满足市场需求。
而且,以最近的Filecoin测试网为例,存储1T冷数据的写入时间需要两到三个小时,因为这个过程使用复制证明算法需要先把数据切片再建13次哈希树,最后写入磁盘,但用户存储数据最重要的因素是效率,其次才是安全,如果存储1T数据需要几个小时,那没有多少用户愿意使用,最终可能导致很难运营起来。
另外,IPFS也不能保证数据的完整性,它的数据都是单点存储,其他节点都是代查询临时存储,不定期会进行垃圾回收,如果单点存储的机器宕机,同时碰巧临时文件被系统回收了,那此时用户想读取数据就会出现可用性问题。
所以我们可以看到IPFS目前确实还是存在一些问题,Filecoin也只是在IPFS协议上搭建了一个经济模型,对于文件的存储机制和传播机制实际上是没有大太改变的。
我们认为分布式存储应该是既支持冷数据也可以支持热数据,同时应具有完备的生命周期,可以进行数据回收,可以按照用户要求去保证数据完整性和安全性,所以我们沿着这个目标做了整套的DSP分布式存储技术方案。
链捕手:能否更具体地谈谈DSP协议的技术特性?
周炎:第一是冷热数据兼备,目前的现有的分布式存储项目还没有可以做到冷热数据兼备的。我们将数据划分为热数据与冷数据并制定了不同的储存策略,冷数据主要是面向个人的存取需求,类似于具有私密性的个人网盘空间,我们通过密码学算法保护这些数据无法被破解;热数据主要是面向外界有传播需求的数据,比如文章、视频等。
第二是存储证明,我们是唯一可以通过共识去完成,并且不需要第三方挑战者介入的。它是一个基于共识机制的自证明,这样避免了引入挑战者这样的中心化角色的介入。
第三是二层协议存储,链上是负责冷数据存储,链下则用来负责对热数据的存储,这个过程不需要链的参与,系统性能可以极大地得到提升,同时又会通过Layer2层与主链交互,使这些数据的安全得到保障。
链捕手:那么为什么其它项目很少往这几个方向做呢?
周炎:因为大部分项目实际上没有认真的去花时间和资源去做这部分的研究及开发。做分布式存储第一重要的是投入,第二是耐心,只有认真做技术的团队才能坚持做下来,反观现存大部分的项目都是先发币,上完交易所才开始做,但那个时候还有多少人有能够沉下心去做,因为有太多更容易赚钱的方式摆在面前,可能做做量化交易就能赚钱了。
我们这几年之所以可以持续在研发进行投入离不开Onchain对于行业发展执着追求和投入,除了公司需要有这个财力可以支撑一个较长的开发周期,还需要有对这个行业充分的信心,否则谁会愿意先投几千万花两年做产品,大多数都想着先发币。
链捕手:资料显示任何有联网能力的设备都能通过DSP协议加入存储网络中,但实际上有许多个人设备的性能并不够好,实际使用中会不会导致用户存储与读取的体验不佳?
周炎:我们对存储算法进行过针对性的优化与测试,冷数据存储在苹果的MAC系统上就能运作起来,热数据在ARM版安卓系统也能正常运作,因为基于二层数据传播协议并不需要经过链共识,它只需要维护一个状态机,再加上网络数据吞吐。
链捕手:据了解DSP协议没有发行Token的计划,那你们如何激励更多存储设备加入存储网络?具体的激励模型与应用场景是怎样的?
周炎:我们这套网络系统在国内实际上主要面向To B和To G,围绕着这两个方向打造生态。举个例子,我们与某个知名网络游戏签约合作,这个网游用户在使用这个游戏时可以选择用自己的设备来运行我们的客户端,平台可以给予游戏代币的奖励作为激励,因为这种方案可以帮助平台节约大部分的CDN网络成本,这样生态就会逐步建立起来了。
现在国内互联网公司对CDN依赖强烈,但是价格非常昂贵。同时大部分的网游数据包体积越来越大,基本在1个G以上,另外短视频行业也需要非常高的流量,这些场景都是分布式存储未来潜在的商业化空间。
02
合规与未来
链捕手:官方资料中还提到DSP协议接下来还有需要继续改善的部分,比如说消息延迟、信息冗余。
周炎:这几个方面确实需要后期继续完善。因为消息延迟度与网络节点数量存在强相关性,如果网络中的节点越来越多的话,消息延迟度肯定会呈指数级下降。
对于消息冗余,其实是我们系统保证可用性的必备选项,因为我们考虑到用户存储到我们系统的数据要实时可取,如果不做至少三倍的冗余和备份,系统基本无法保证数据的可靠性。
链捕手:由于消息延迟的原因,DSP协议不适合用在对实时性要求较高的场景下,你认为哪些典型场景需要较高的实时性?
周炎:比如互联网社交应用、直播应用,这类产品要求低延时,通过现有的互联网技术可以优化到10秒以内的延时,但我们基于P2P模式部署的网络硬件模式很难做到,更多地是针对低延迟要求不高的点播性数据。这个问题的解决必须等到下一个网络通信时代,像IPV6颠覆了IPV4时代整个运营商的硬件网络架构,那时才会实现真正的P2P,然后才能实现低延时。
链捕手:分布式数据存储大规模应用不可避免会涉及到内容合规与监管协作问题,你们如何平衡个人隐私与合规监管的关系?
周炎:在国内,做任何产品都首先要考虑到国家层面的影响,以保证它在合规的前提下运行保持一定的持续性,这是前提,如果无法在合规的范围内持续运行下来,也就不存在隐私这些问题。
为此,我们在系统架构中增加了决策层,监管部门可以通过这个通道对热数据内容进行审查。监管部门需要什么类型的数据,或者对哪类数据比较敏感,我们可以对策略进行更新与添加,类似于舆情监控,监管部门则可以通过这些策略得到的信息进行屏蔽。
链捕手:DSP协议未来计划还会服务于其它区块链协议、分布式应用,那么在跨链技术方面你们目前有怎样的设想与思路?
周炎:跨链其实一直是我们技术体系里的一部分,但我们认为我们的技术优势在于分布式存储,如果同时做两个方向会造成开发资源的分散,所以我们决定把工作目标缩窄,计划在跨链方面与外部项目进行联动,比如等我们这条链部署完成后,专门找一个跨链组织跟它打通,那么我们就可以与其它区块链网络打通了。
链捕手:目前项目开发进度是怎样的?
周炎:我们项目其实从18年6月就已经立项进入工程化开发阶段,到目前所有技术架构都已经准备就绪,我们目前的测试系统都是按照可交付标准去实验的,包括UI产品、多语言浏览器等,前段时间还去国家电网演示过。我们现在主要在考虑商业模式的相关事宜,等商业模式确定后随时可能上线。
像Filecoin的商业模式就是矿机,它现在基本上把市场教育的得淋漓尽致。从二级市场反馈来看,矿机这种重资产的价值一定要远远高于其它轻资产,资本会更加青睐,我们要做专门的矿机也很容易,但目前没有矿机方面的计划,我们认为这套玩法并不适合自身。
链捕手:分布式存储的价值已经得到行业的基本认可,你们对分布式存储未来的发展前景有怎样的看法?
周炎:分布式存储的定位就是下一代互联网基础设施,它可以保证数据与设备整个生命周期的安全,但这个过程是要跟其它技术并行演进的。在我们看来,从18年开始就认为区块链单独成熟落地是不可能的事,它目前在互联网世界唯一的优质应用就是金融,比如支付、借贷、结算等,其它问题互联网都有相对更优的解决方案。
但这并不是说区块链技术没有更多的应用场景,我们认为区块链技术需要5G、IoT、AL等其他前沿技术相互叠加、同步成熟才更有价值,才能为它自身带来更多的场景,成为这个时代基础设施不可或缺的一部分。
值得看看:
这是「链捕手」的第285期文章,
以上是关于专访DSP协议周炎:分布式存储的发展需与5GIoT并行演进 |链捕手的主要内容,如果未能解决你的问题,请参考以下文章
专访陈群:分布式存储时代,横空出世的 OceanBase | SACC 名人堂
DeepTech深科技专访丨分布式系统开源项目领跑者Alluxio获5000万美元C轮融资
政策扶持 | “分布式存储技术”将成为中国科技腾飞的下一个支点