AZ 突触链接的 Dataverse 表在 AZ 数据湖 Gen2 中消失

Posted

技术标签:

【中文标题】AZ 突触链接的 Dataverse 表在 AZ 数据湖 Gen2 中消失【英文标题】:AZ synapse linked Dataverse tables disappearing in AZ data lake Gen2 【发布时间】:2021-09-17 15:37:25 【问题描述】:

我已使用 azure synapse 链接将我的 dataverse 表同步到 az Data Lake。我确认表格确实出现了。一段时间后,当我检查时,那里没有桌子。不知道为什么。需要帮忙。 Tables in Dataverse synapse link store

Az Data lake showing no tables

【问题讨论】:

确保您具有系统管理员或系统定制员安全角色或等效权限来更新设置。您能否详细说明添加新表后执行的操作?它们现在可见吗?我在重现期间看不到任何此类问题。 【参考方案1】:

在某些情况下,新链接不会立即可用。稍等片刻,它应该会可用。

确保您遵循prerequisites 创建和配置 Azure 数据湖存储帐户,并授予自己存储帐户的所有者角色。此外,您授予 Power Platform Dataflows 服务对您的存储帐户的访问权限。更多信息:Self-service data prep with dataflows。

您的 Dataverse 环境已链接到 Azure Data Lake Storage Gen2 帐户。 Azure 存储帐户中的文件系统是为每个选择复制到数据湖的表创建一个文件夹。

在 Azure Data Lake Storage Gen2 中查看数据时,请确保根据您的设置从文件系统中正确选择以下内容。

dataverse-environmentName-organizationUniqueName

此外,您可以使用 model.json 文件及其名称和版本进行验证,提供已导出到数据湖的表列表。 model.json 文件还包括初始同步状态和同步完成时间。对于导出到数据湖的每个表,都会显示一个包含快照逗号分隔(CSV 格式)文件的文件夹。

Microsoft Dataverse 数据可以通过创建、更新和删除事务不断更改。快照提供定期更新的只读数据副本,在这种情况下每小时,以确保在任何给定时间点,数据分析使用者都可以可靠地使用湖中的数据。

打开model.json,可以查看快照详情。 Dataverse 中的更改通过使用涓流馈送引擎不断推送到相应的 CSV 文件。

【讨论】:

以上是关于AZ 突触链接的 Dataverse 表在 AZ 数据湖 Gen2 中消失的主要内容,如果未能解决你的问题,请参考以下文章

AWS 最佳实践:我应该在每个 AZ 中都有一个 NAT 网关吗?

跨AZ部署最佳实践之Kafka

az104认证有用吗

我们可以在同一个AZ中拥有两个AWS NAT实例

如何更新所有 Azure Powershell Az 模块?

找不到包Az