总结Kylin创建Cube

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了总结Kylin创建Cube相关的知识,希望对你有一定的参考价值。

根据上篇文章Kylin创建Model之后,创建Cube


第一步,Cube Info

填写Cube基本信息

技术分享

第二步,Dimensions

技术分享技术分享

第三步,Measures

技术分享技术分享

第四步,Refresh Setting

Auto Merge Thresholds :自动合并阈值,按天增加的segement,每7天合并一次;7天的segment每28天合并一次

Retention Threshold:默认为0,保留历史所有的segment(hotelinfo每个分区都是全量数据,所以此处只保留一天的数据)

Partition Start Date:分区开始时间

技术分享技术分享

第五步,Advanced Setting

Mandatory Dimensions:强制维度,表示当前ID的Aggregation Group中的所有Cuboid的每一个Cuboid都包含该项配置的维度

Hierarchy Dimensions:层级维度,当有多个维度能够存在层级关系,可以在该配置项中,将这些维度配置为层级维度

例如,国家,省,城市三个维度

Joint Dimensions:联合维度,联合维度中的多个维度,在查询中,要么一起出现,要么都不出现。

技术分享技术分享

Encoding:编码,指定了该维度的值应该使用何种方式进行编码,选用合适的编码能够有效减少维度对空间是使用,在大数据量情况下效果明显。

Shard By:按维度对数据进行分片,默认Cuboid的数据分片策略是随机的,并且只能设置一个维度为Share By。

如果Cuboid中的某些行的Shard By Dimension的值是相同的,那么这些行的数据最终将会分配到同一个分片中。

例如:好多酒店都在一个城市当中,如果将CITYID维度设置为Share By,则同一个城市的酒店数据将分配到同一个分片中。

技术分享技术分享

第六步,Configuration Overwrites

覆盖kylin.properties中的配置

技术分享技术分享

第七步,Overivew

Cube概览,点击Save保存

技术分享技术分享


本文出自 “巧克力黑” 博客,请务必保留此出处http://10120275.blog.51cto.com/10110275/1905936

以上是关于总结Kylin创建Cube的主要内容,如果未能解决你的问题,请参考以下文章

Kylin构建Cube过程详解

kylin cube 构建过程

Kylin构建Cube及高级设置

Kylin实践—— Kylin的使用以及Model和Cube构建详细流程

Kylin实战—— Cube构建流程

六十四Kylin的初体验