盘古开源分析：Filecoin如何存储冷热数据？

Posted 2021-09-03 盘古开源

Filecoin致力于打造覆盖全球的分布式存储网络来帮助大家存储大数据，并且可以解决数据安全隐私性问题。

随着Web3.0时代的来临，大数据时代也揭开了帷幕，今天我们就来说说大数据的冷热数据是什么？它们又如何存储在Filecoin之中。

大数据

大数据是以容量大、类型多、存取速度快、应用价值高为主要特征的数据集合，最早应用于IT行业。

目前正快速发展为对数量巨大、来源分散、格式多样的数据进行采集、存储和关联分析，从中发现新知识、创造新价值、提升新能力的新一代信息技术和服务业态。

大数据必须采用分布式架构，对海量数据进行分布式数据挖掘，因此必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。

大家目前对大数据都非常认可，对于大数据的发展前景也极为看好，国家在大数据方面也在做大量的基础建设和政策支持，“东数西算”工程就是很好的例子。

大数据分类

数据大体分为两类：热数据和冷数据。

热数据：是需要被计算节点频繁访问的在线类数据。

比如天气、交通信息、连载电视剧、热门小说、音乐等等，这些都属于热数据的范畴。

热数据由于访问频次极高，效率方面也要很高，需要性能强劲的服务器来做存储服务，以便于更快的读取和计算。

冷数据：是对于离线类不经常访问的数据。

比如企业备份数据、业务与操作日志数据、话单与统计数据、历史数据等等。

这类数据一般访问频次不高，效率方面要求也就相对较低，这类数据通常也比较重要，所以安全存储是首要的选择，分布式存储就是一个很好的选择。

一句话概括它们之间的区别：热数据就近计算，冷数据集中存储。

Filecoin如何保存冷热数据

IPFS项目通过整合BitTorrent、DHT、Git和SFS等技术，创建一种Peer-to-Peer超媒体协议，目的就是打造一个更加快速、安全、开放的下一代互联网，实现互联网中永久可用、数据可以永久保存的全球文件存储系统。

Filecoin是IPFS的官方激励层，也是目前分布式存储的龙头项目。

Filecoin现阶段存储的以冷数据为主，由于要保证数据的安全存储，并且在存储、验证的过程中计算比较昂贵，现阶段成本也比云存储的成本高一些。

客户目前通常是将需要长时间、甚至永久存储的数据存储在Filecoin网络上，所以Filecoin现阶段是一个安全的冷数据存储网络。

当然，Filecoin也自带检索功能，可以提供实时数据的检索查询。

随着Filecoin网络的性能不断提升，计算能力不断增强，未来也将容纳更多的热数据在其中。

目前全网算力正在以60PiB的速度高速增长，使用成本也会越来越低，为实现大规模的数据应用提供坚实的基础。

未来的时代，数据就是生产资料，而Filecoin是存放生产资料的土地，可以预见这片土地的价值在未来将会变成极为昂贵，抓住时代机遇，早日参与Filecoin，获取时代红利。