hive里 load data执行日志怎么看

Posted 2023-05-07

查看步骤如下： 1，用windows身份验证登陆数据库，点击连接， 2，展开数据库服务器下面的管理，SQL Server日志， 3，双击当前可以打开日志文件查看器里面有所有的运行日志， 4，点击任意一行，可以看见具体的信息，错误原因和时间， 参考技术A 用sqoop将数据库中的数据导入到hive中报错 Cannot run program "hive"经查sqoop的已将数据库中的数据导入到hdfs中了,但是hive中查表没有数据说明导入确实是失败了...本回答被提问者采纳

Loading Data Into Hive From File By ODI 12c

本文介绍如何将文本文件中的数据通过ODI导入Hive数据仓库。

一、Hive上创建目标表

1.1 源表定义

CREATE TABLE EXAM_SCORE
(
  ID            NUMBER(4),
  AREA_ID       NUMBER(1),
  EXAM_INFO_ID  NUMBER(3),
  STU_SEQUENCE  NUMBER(12),
  SCORE         NUMBER(3),
  SUBJECT_ID    NUMBER(3),
  CLASS_ID      NUMBER(6)
)

1.2 目标表定义

CREATE TABLE hivedb.exam_score
(
  ID            string,
  AREA_ID       string,
  EXAM_INFO_ID  string,
  STU_SEQUENCE  string,
  SCORE         string,
  SUBJECT_ID    string,
  CLASS_ID      string
);

二、构造映射关系

2.1 新建Hive模型

如下图所示，输入相关参数后，先保存，然后点击“Reverse Engineer”，同步表结构。

2.2 新建File模型

Definition选项栏：

Files选项栏：

Attributes选项栏：

2.3 创建映射关系图

拖动文件模型和hive模型，组成下图中的映射关系：

其中，LKM选择“LKM File to Hive LOAD DATA.GLOBAL”，如果文件在本地，则设置“FILE_IS_LOCAL”的值为“True”，如下图：

其中、IKM选择“IKM Hive Incremental Update.GLOBAL”，如果要清空表中现有数据，则设置TRUNCATE的值为True即可，如下图：

最后保存所有更改。

2.4 执行映射

执行结果如下图：