kettle-输入组件

Posted qingxinziran007

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了kettle-输入组件相关的知识,希望对你有一定的参考价值。

众所周知,要想深入的设计和了解一个系统,首先要了解系统的输入输出是什么,系统的输入是所有步骤中最为基础的一步,它是所有业务逻辑实现的前提条件。所以这一节是至关重要的,本小节内容将详细的讲解kettle常用的输入组件。

excel输入组件

在工作中经常进行处理的文件格式,就是excel文件。所以熟练掌握excel文件的处理是一种必备的技能。但是有时候,需要将excel文件中的表格数据,转化为其他的格式,如json,xml,txt格式。这种情况又该怎么处理呢?这些工作的前提就是将excel文件的表格数据提取出来,然后才能随心所欲的操作。对于开发者来说,excel输入组件替代了传统的poi解析过程,使excel的解析变得非常的简单透明。

首先,打开PDI工具,新建转换,如:图-1。

图-1

接着依次点击核心对象,输入,并在下拉列表中选择excel输入组件,并拖拽到工作空间上,

如图-2。

图-2

 双击excel输入这个组件,浏览(选择excel文件)——》添加

图-3

在“工作表”选项卡,点击“获取工作表”按钮。(其实获取的就是sheet页的名称)如下图:

图-4

在“字段”选项卡中,点击“获取来自头部数据的字段”,如下图。(“内容”选项卡,“错误处理”选项卡,“其他输出字段”选项卡 不需要进行配置)

图-5

点击“预览记录”按钮,查看最终结果。

图-6

文本文件输入组件

第一步:在工作区拖入“文本文件输入”节点,如下图所示:

第二步:双击“文本文件输入”节点,进行配置,在“文件”选项卡中:1,点击浏览按钮选择本地txt文件;2,点击增加;

文本文件
文件页签配置

第三步:在“字段”选项卡中,点击获取字段,如下图所示:

第四步:点击预览数据,查看最终结果。

表输入组件

 第一步:配置表输入节点:

第二步:配置数据库连接:按照如图的顺序进行配置即可。

第三步:数据库配置成功如下图:

第四步:获取sql语句:

第五步:预览结果

JSON输入组件

第一步:配置Json input组件

第二步: 双击 Json input,配置读取的js文件,其实就是json文件。

 json文件内容如下:

 "store": 
    "book": [ 
       "category": "reference",
        "author": "Nigel Rees",
        "title": "Sayings of the Century",
        "price": 8.95
      ,
       "category": "fiction",
        "author": "Evelyn Waugh",
        "title": "Sword of Honour",
        "price": 12.99
      ,
       "category": "fiction",
        "author": "Herman Melville",
        "title": "Moby Dick",
        "isbn": "0-553-21311-3",
        "price": 8.99
      ,
       "category": "fiction",
        "author": "J. R. R. Tolkien",
        "title": "The Lord of the Rings",
        "isbn": "0-395-19395-8",
        "price": 22.99
      
       "category": "fiction",
        "author": "Samatar",
        "title": "La belle vie",
        "isbn": "0-395-19395-8",
        "price": 24.99
      
    ],
    "bicycle": 
      "color": "red",
      "price": 19.95
    
  

 第三步:配置需要从json文件中获取的字段,采用的是xpath的方式。

 第四步:预览结果

 其实,对json格式数据的操作才是互联网中最常用的。这里是从json文件获取的数据,实际工作中,json数据一般来源于三方接口,这就需要与kettle中的查询组件结合起来使用,后面的查询组件中会详细的讲到。

本节小结

        kettle输入组件,这里只讲解了excel输入组件,文本输入组件,表输入组件,json输入组件这四种组件是在实际工作中最常用的。相关的源码及文件,我会上传到一个github仓库,供大家参考使用。

扩展:

        左图是所有的输入组件,对应的demo参考右图(在pdi的安装目录下面)

        

 

 

 

 

 

 

 

 

 

 

 

以上是关于kettle-输入组件的主要内容,如果未能解决你的问题,请参考以下文章

kettle-输入组件

kettle-输入组件

kettle-输出组件

kettle-输出组件

kettle-输出组件

kettle-输出组件