总结Kylin创建Cube
Posted
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了总结Kylin创建Cube相关的知识,希望对你有一定的参考价值。
根据上篇文章Kylin创建Model之后,创建Cube
第一步,Cube Info
填写Cube基本信息
第二步,Dimensions
第三步,Measures
第四步,Refresh Setting
Auto Merge Thresholds :自动合并阈值,按天增加的segement,每7天合并一次;7天的segment每28天合并一次
Retention Threshold:默认为0,保留历史所有的segment(hotelinfo每个分区都是全量数据,所以此处只保留一天的数据)
Partition Start Date:分区开始时间
第五步,Advanced Setting
Mandatory Dimensions:强制维度,表示当前ID的Aggregation Group中的所有Cuboid的每一个Cuboid都包含该项配置的维度
Hierarchy Dimensions:层级维度,当有多个维度能够存在层级关系,可以在该配置项中,将这些维度配置为层级维度
例如,国家,省,城市三个维度
Joint Dimensions:联合维度,联合维度中的多个维度,在查询中,要么一起出现,要么都不出现。
Encoding:编码,指定了该维度的值应该使用何种方式进行编码,选用合适的编码能够有效减少维度对空间是使用,在大数据量情况下效果明显。
Shard By:按维度对数据进行分片,默认Cuboid的数据分片策略是随机的,并且只能设置一个维度为Share By。
如果Cuboid中的某些行的Shard By Dimension的值是相同的,那么这些行的数据最终将会分配到同一个分片中。
例如:好多酒店都在一个城市当中,如果将CITYID维度设置为Share By,则同一个城市的酒店数据将分配到同一个分片中。
第六步,Configuration Overwrites
覆盖kylin.properties中的配置
第七步,Overivew
Cube概览,点击Save保存
本文出自 “巧克力黑” 博客,请务必保留此出处http://10120275.blog.51cto.com/10110275/1905936
以上是关于总结Kylin创建Cube的主要内容,如果未能解决你的问题,请参考以下文章