商业智能？大数据？数据分析师必备的大数据交互式分析方案

Posted 2021-04-20 Kyligence

本文转载来源：Microsoft云科技

小美，女，29岁，名校统计专业研究生，某创新型企业数据分析师，年轻貌美的面庞无法掩盖她对于数据的敏感，在数据分析领域有着独到又深入的理解，是一名经验丰富的“技术大牛”；

然而这并不是征婚启示……

自加入公司以后，小美熟练操作各种BI工具，为公司业务辅助决策做出了重大贡献。随着公司快速发展，数据量爆炸式增长，公司的数据平台也变得愈加复杂。小美最熟悉的Excel、Tableau等工具使用效率大幅降低，经常喝一杯咖啡的时间还刷不出一张报表，而且可分析的场景复杂度也大大受限，很多技术问题必须依赖IT才能解决，这让小美瞬间从“技术大牛”变成了“技术小白”，真是郁闷。

 

公司IT小哥为此伤透了脑筋，尝试了各种云、大数据、技术架构，都难以满足小美的需求。直到有一天，小哥在Azure镜像市场找到了一套方案，能够在云上轻松搭建一套大数据分析平台，既能满足小美对于自助式分析的需求，又能支持高并发以服务更多像小美一样的小姐姐，云上架构也能降低自己运维、扩容方面的压力，真是皆大欢喜。

这个镜像就是最近在Azure镜像市场上线的Kyligence Analytics Platform（KAP）。KAP是由Kyligence提供的、基于Apache Kylin的下一代企业级数据仓库及商务智能大数据分析平台，在PB级数据集上提供亚秒级标准SQL查询响应，支持互联网级的高并发能力，赋能数据分析师、工程师用最熟悉的数据仓库和BI方法论对大数据平台中的海量数据进行分析

PB级数据究竟有多大？

      PB是数据存储容量的单位，它等于2的50次方个字节，或者在数值上大约等于1000个TB。
      麦肯锡首席分析师Michael Chui指出，美国国会图书馆“在2011年4月前已经收集了235TB的数据，而一个PB相当于它的4倍。

资料来源：TechTarget中国

通过这个镜像，用户可以轻松获得一个HDInsight集群以及运行在其上的KAP实例，而且所有的环境配置均已调至最优。通过这一镜像安装KAP，可以有效降低大数据使用的门槛，提高大数据分析的效率，帮助企业在云上快速开展业务。

如何使用这一镜像

1

用户登陆Azure镜像市场之后，可以通过搜索“Kyligence”关键字即可快速找到KAP应用。接下来，只需要单击“立即部署”按钮，再按照向导进行配置即可在十几分钟快速创建出一个包含HDInsight和KAP的完整集群。

图 1 Azure镜像市场

2

同时，KAP也是HDInsight的内置应用之一。用户可以在已有的HDInsight集群中直接增加KAP节点。

图 2 HDInsight内置应用

3

当集群部署妥当，用户就可以登录并进行数据建模和查询分析了。譬如，公司财务分析师最熟悉使用Excel分析销售业绩，现在他完全不用担心对大数据技术的陌生，打开Excel透视表，继续他的数据之旅就好了。

图 3 使用Excel进行交互式分析

4

公司负责国际业务的总监需要按时从报表上了解不同业务、地域的销售业绩，以安排关键决策，报表的稳定性至关重要。通过Power BI创建报表并通过Direct Query方式查询KAP，报表性能大幅提升且相当稳定，为关键业务分析提供了完美保障

图 4 使用PowerBI进行数据可视化

还有还有，投资部门进行行业相关性分析、销售部门考核销售排名、产品部门分析用户排名、市场部门分析用户画像和精准营销……一切都变得更加美好！

通过Azure镜像市场部署Kyligence Analytics Platform(KAP)+HDInsight的大数据解决方案，实现大数据上的自助式、交互式分析，从此让数据分析师告别技术瓶颈的困扰，把更多精力投入到释放数据价值的方向上来。这仿佛给大数据装上了自动挡，让每个分析师都成为技术大牛！

故事的最后，公司IT小哥在Azure上搭建了大数据分析平台，帮助小美用最熟悉的BI工具就可以玩转大数据，分析师小姐姐们都围着他说：“技术大牛，带带我！” 

关于Kyligence

Kyligence 由首个来自中国的 Apache 软件基金会顶级开源项目 Apache Kylin 核心团队组建，是专注于大数据分析领域创新的数据科技公司。Kyligence 提供基于 Apache Kylin 的企业级大数据智能分析产品 Kyligence Enterprise，以及基于公有云的托管式 Kylin 在线服务 Kyligence Cloud。目前，Kyligence 已赢得了海内外多家金融、保险、证券、电信、制造、零售、广告等企业级客户。

Kyligence 由 Redpoint、思科、CBC 和顺为投资。2017年6月，Kyligence 于微软加速器·上海一期毕业。

作者介绍

李栋，Kyligence技术合伙人兼高级架构师，Apache Kylin核心开发者和项目管理委员会成员（PMC)，专注于大数据技术研发和生态拓展。毕业于上海交通大学计算机系；曾任eBay全球分析基础架构部高级工程师、微软云计算和企业产品部软件开发工程师。

点击阅读原文，了解方案详情