Google Cloud Storage 数据的备份选项或快照?

Posted

技术标签:

【中文标题】Google Cloud Storage 数据的备份选项或快照?【英文标题】:Backup options or snapshots of Google Cloud Storage data? 【发布时间】:2017-04-17 17:19:37 【问题描述】:

我将数据提取到 Google BigQuery 表中,并每天根据这些数据生成一些新数据集。

这些原始数据和生成的日期集,我会出于两个目的保存在 Google Cloud Storage 中,

    这些是我的 Google BigQuery 数据的备份副本。 此外,保存在 Google Cloud Storage 中的一些数据集将被转储加载到 AWS Elasticsearch(因此它们也是 AWS Elasticsearch 的备份副本数据) BigQuery 或 AWS Elasticsearch 可能只保留 2 个月到 1 年的数据。所以比这更早的数据,我在谷歌云存储上只有一份。 (我需要一些备份选项,例如 Google Cloud Storage 的 1 个月快照,如果需要我可以返回。)

我的问题是

如何保留 Google Cloud Storage 数据的备份或快照,以防止 Google Cloud Storage 中的数据丢失。比如让我至少回溯 7 天或 1 个月在 Google Cloud Storage 中的数据?

所以在数据丢失的情况下,(意外删除数据等),我可以回去几天取回数据。

谢谢!

【问题讨论】:

【参考方案1】:

您可以将您的云数据备份到一些本地存储,CloudBerry 有“云到本地”选项。

【讨论】:

还可以进行云到云迁移【参考方案2】:

我可以推荐我自己使用的软件-Cloudberry backup,可以将云存储备份到本地存储或其他云存储。该工具支持各种云存储,即Amazon,Google,Azure等。您也可以下载和上传数据借助该工具,因此最好将其安装在 Google VM 上。

【讨论】:

以上是关于Google Cloud Storage 数据的备份选项或快照?的主要内容,如果未能解决你的问题,请参考以下文章

Google Cloud Storage 数据的备份选项或快照?

如何从 Google Cloud Storage 中获取特定对象元数据信息?

Spring + google cloud:没有可用的“com.google.cloud.storage.Storage”类型的合格bean

Bigquery 无法从 Google Cloud Storage 加载数据

使用 Python API 以最低权限从 Google Cloud Storage 读取数据

指定要使用 Google Cloud Storage 通知发布的元数据