Spark JDBC系列--Mysql tinyInt字段特殊处理

Posted chenzechao

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Spark JDBC系列--Mysql tinyInt字段特殊处理相关的知识,希望对你有一定的参考价值。

 

当spark取出表的scheme中,类型名为tinyint的字段,会被处理为Boolean型。而mysql中tinyint的sqlType都会默认处理为bit,所以如果数据库中的这类字段中,存储了0、1之外的值,拉取数据时则会出现数据失真。

处理方式:

在JDBC的URL中加入参数:tinyInt1isBit=false
---------------------
原文:https://blog.csdn.net/weixin_34025151/article/details/86813359

以上是关于Spark JDBC系列--Mysql tinyInt字段特殊处理的主要内容,如果未能解决你的问题,请参考以下文章

spark连接jdbc,连接mysql

如何使用Spark执行MySQL(JDBC)连接?

无法在 ipython 中正确创建 spark 上下文以链接到 MySQL - com.mysql.jdbc.Driver

Spark JDBC 中的伪列

SPARK SQL - 使用 DataFrames 和 JDBC 更新 MySql 表

Spark JDBC To Other Databases