雪花复制命令以将默认值替换为 null
Posted
技术标签:
【中文标题】雪花复制命令以将默认值替换为 null【英文标题】:Snowflake copy command to put default values in place of null 【发布时间】:2021-03-30 09:35:44 【问题描述】:我正在将数据复制到雪花表中,该表包含三列:ID、DATA 和 ETL_LOAD_TIMESTAMP。
我在 TIMESTAMP_TZ(9) 类型的雪花中有一个 ETL_LOAD_TIMESTAMP 列,我已将其默认值设置为 CURRENT_TIMESTAMP()。
我从 CSV 文件中获取数据,该文件类型为:
ID, DATA
1, Dummy
我在本地的 tmpdir 位置下载 csv 文件。我将此csv的数据加载到雪花中:
create_cmd = "CREATE TEMPORARY STAGE teamp123 COMMENT = 'TEMPORARY STAGE FOR TEST_TABLE1 DATA LOAD'"
self.connection.execute("ALTER SESSION SET TIMEZONE = 'UTC';")
self.connection.execute(create_cmd)
self.connection.execute(f"put file://tmpdir/* @temp123 PARALLEL=8")
self.connection.execute("COPY INTO TEST_TABLE1 FROM @temp123 PURGE = TRUE FILE_FORMAT = (TYPE = 'CSV' field_delimiter = ',' FIELD_OPTIONALLY_ENCLOSED_BY = '\"' ESCAPE_UNENCLOSED_FIELD = None error_on_column_count_mismatch=false SKIP_HEADER = 1)")
我得到了 ID 和 Data 的值,但 ETL_LOAD_TIMESTAMP 为空。
如何修改此复制命令,以便获得 ETL_LOAD_TIMESTAMP 的默认值,即当前时间戳而不是 null?
【问题讨论】:
【参考方案1】:您可以在定义数据类型或显式 to_timestamp 时使用默认 current_timestamp()
https://docs.snowflake.com/en/user-guide/data-load-transform.html#current-time-current-timestamp-default-column-values
【讨论】:
以上是关于雪花复制命令以将默认值替换为 null的主要内容,如果未能解决你的问题,请参考以下文章