Hive操作总结

Posted 837634902why

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hive操作总结相关的知识,希望对你有一定的参考价值。

(一)集合数据类型

数据类型

描述

语法示例

STRUCT

c语言中的struct类似,都可以通过“点”符号访问元素内容。例如,如果某个列的数据类型是STRUCTfirst STRING, last STRING,那么第1个元素可以通过字段.first来引用。

struct()

MAP

MAP是一组键-值对元组集合,使用数组表示法可以访问数据。例如,如果某个列的数据类型是MAP,其中键->值对是’first->John’和’last->Doe’,那么可以通过字段名[last]获取最后一个元素

map()

ARRAY

数组是一组具有相同类型和名称的变量的集合。这些变量称为数组的元素,每个数组元素都有一个编号,编号从零开始。例如,数组值为[JohnDoe],那么第2个元素可以通过数组名[1]进行引用。

Array()

Hive有三种复杂数据类型ARRAYMAP 和 STRUCTARRAYMAPJava中的ArrayMap类似,而STRUCTC语言中的Struct类似,它封装了一个命名字段集合,复杂数据类型允许任意层次的嵌套。

(1)数据结构如下

    "name": "songsong",
    "friends": ["bingbing" , "lili"] ,       //列表Array, 
    "children":                       //键值Map,
        "xiao song": 18 ,
        "xiaoxiao song": 19
    
    "address":                       //结构Struct,
        "street": "hui long guan" ,
        "city": "beijing" 
    

(2)hive上创建表格

create table test(
name string,
friends array<string>,
children map<string, int>,
address struct<street:string, city:string>
)
row format delimited fields terminated by ‘,‘    -- 列分隔符
collection items terminated by ‘_‘  --MAP STRUCT 和 ARRAY 的分隔符(数据分割符号)
map keys terminated by ‘:‘  -- MAP中的keyvalue的分隔符
lines terminated by ‘\\n‘;  -- 行分隔符

 具体文件数据如下

songsong,bingbing_lili,xiao song:18_xiaoxiao song:19,hui long guan_beijing
yangyang,caicai_susu,xiao yang:18_xiaoxiao yang:19,chao yang_beijing

(3)将文件的数据同步到hive

load data local inpath /home/hadoop/file/file1 into table test;

(4)查询某条数据的制定元素

select friend[1],children[‘xiao song‘],address.city from test where name=‘songsong‘;

 (5)运行结果

技术图片

 

 

(二)hive删除数据库

(1)删除空的数据库

drop database db_hive2;//若数据库不存在会报错
drop database if exists db_hive2;

 (2)删除不为空的数据库

drop database db_hive cascade;//cascade为强制删除

 

以上是关于Hive操作总结的主要内容,如果未能解决你的问题,请参考以下文章

Hive的面试题总结

hive操作简单总结

Hive操作总结

Hive 查询优化总结

Hive 查询优化总结

hive业务总结1