导入/导出DataFusion管道

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了导入/导出DataFusion管道相关的知识,希望对你有一定的参考价值。

有人知道是否可以通过编程方式导入/导出DataFlow管道(已部署或处于草稿状态?)>

想法是编写一个脚本以删除并创建一个DataFusion实例,以避免在不使用它时进行计费。通过gloud命令行,可以设置DataFusion集群并销毁它,但是自动导出和导入我所有的管道也很有趣。

不幸的是,官方文档对我没有帮助...

谢谢!

有人知道是否可以以编程方式导入/导出DataFlow管道(已部署或处于草稿状态?这个想法是编写一个脚本来删除并创建一个DataFusion实例,顺序为...

答案

您可以使用REST API来执行此操作。但是,在给定实例URL的情况下,您可能需要一些脚本来自动执行此操作。您应该能够从应用程序列表API(reference here)获取管道配置。在您的情况下,您首先需要获取管道列表(reference here),然后遍历所有管道并获取各个管道的详细信息,这些管道将具有名为configuration的属性,该属性将具有配置管道json。您仍然必须使用名称,描述,工件信息以及带有从后端收到的配置json的config属性创建新的JSON。

以上是关于导入/导出DataFusion管道的主要内容,如果未能解决你的问题,请参考以下文章

SQL Server 2005导入数据时出错,导入的是TXT文本格式

将 SQL 导出到 CSV 时出错 - 管道

导入图片数据

使用 Python Selenium Webdriver 自动导出 Azure Devops 管道工作项修订

我可以使用 Powershell 导出 azure devops 管道运行历史吗?

Scrapy 管道以正确的格式导出 csv 文件