Flink Table API & SQL 类型系统 DataType

Posted @SmartSi

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Flink Table API & SQL 类型系统 DataType相关的知识,希望对你有一定的参考价值。

Flink 版本:1.13.5

由于历史原因,在 Flink 1.9 之前,Flink 的 Table API & SQL 数据类型与 Flink 的 TypeInformation 紧密耦合。TypeInformation 主要用于 DataStream 和 DataSet API 中,为系统序列化和反序列化基于 JVM 的对象提供必要的信息。

但是,TypeInformation 原本的设计目的并不能表示不同实际 JVM 类的逻辑类型。因此 SQL 的标准类型很难与这种抽象进行映射。此外,某些类型也不符合 SQL 标准。从 Flink 1.9 开始,Table API & SQL 将获得一个新的类型系统 DataType。

1. 新的数据类型 DataType

Table API & SQL 中新的数据类型 DataType 描述了 Table 生态系统中值的逻辑类型,可以用来声明操作的输入和输出类型。Flink 的数据类型与 SQL 标准的数据类型比较相似,同时也支持 NULL/NOT NULL,例如如下所示:

  • INT
  • INT NOT NULL
  • INTERVAL DAY TO SECOND(3)
  • ROW<myField ARRAY, myOtherField TIMESTAMP(3)>

在使用基于 JVM API 编写 Table API、定义 Connector、Catalogs 或者自定义函数中,需要使用 org.apache.flink.table.types.DataType 数据类型的实例。

1.1 作用

DataType 主要有两个作用:

  • 声明逻辑类型&

以上是关于Flink Table API & SQL 类型系统 DataType的主要内容,如果未能解决你的问题,请参考以下文章

2021年大数据Flink(三十):Flink ​​​​​​​Table API & SQL 介绍

Flink Table API & SQL Planner 演变

18-flink-1.10.1-Table API & Flink SQL

Flink Table API & SQL Planner 演变

Flink SQL - 2.Table API & SQL 概述与常规 API

Flink SQL - 1.Table API && Sql 入门 Demo