SnowFlake 可以用作 AWS 的数据迁移服务中的源端点吗?

Posted

技术标签:

【中文标题】SnowFlake 可以用作 AWS 的数据迁移服务中的源端点吗?【英文标题】:Can SnowFlake be used as a source endpoint in Data Migration Service of AWS? 【发布时间】:2021-06-01 23:29:00 【问题描述】:

我正在尝试将 AWS DMS Database Migration Service 与 Snowflake 一起用作源数据库。有什么办法可以实现吗?

我能看到 IBMDB2、mysql、SQL Server、Amazon Aurora、Oracle、SAP Sybase 等的所有选项。但对于 Snowflake 却没有。

可以将 SnowFlake 的 ODBC 字符串作为源端点放入吗?或任何解决方法

【问题讨论】:

【参考方案1】:

因为 DMS 还不支持 Snowflake 作为目标,所以我认为您可以使用 S3 作为目标然后使用

Snowflake 批量加载以从 S3 https://docs.snowflake.com/en/user-guide/data-load-s3-create-stage.html 加载数据 使用雪管进行连续加载。

【讨论】:

以上是关于SnowFlake 可以用作 AWS 的数据迁移服务中的源端点吗?的主要内容,如果未能解决你的问题,请参考以下文章

从 Hive Map 迁移到 Snowflake Variant

AWS Lambda Snowflake Python 连接器在尝试连接时挂起

从 AWS S3 复制到 Snowflake 需要比平时更多的时间

从 AWS S3 复制到 <Snowflake table>

在 AWS 上为 Databricks 和 Snowflake 使用 Spark 连接器

AWS Redshift 可以用作服务吗?