一个好的olap框架

Posted 2020-12-04 码以致用

一、何为一个好的olap框架？

olap框架需要具备如下基本素质：

1、易开发性（业务代码占比高，框架易于使用，只需关注业务即可）

2、高可维护性（冗余代码少，应对需求变更的能力强，最少的代码变更实现最多的需求）

3、高可移植性（新项目上线可快速复用已有代码，要求框架的通用性、精炼度要高）

二、为什么需要olap框架？

1、框架大概分为两种：

底层技术框架，专注于抽象底层技术，如网络通信netty、中间件kafka等

开发人员框架，专注于提高开发效率，如spring的面向切面和依赖注入。但这只是面向编程语言开发人员的，其实还应该有olap框架，面向数据业务开发人员

2、对以下场景，只有olap框架才能真正提升生产力，这是个系统性的工程，而不是用某些高大上的从所谓大公司那借鉴过来的零碎技术所能解决

小公司大项目，人手紧张，项目任务繁重，变更需求频繁；

互联网项目，变更需求频繁

三、具体实现方法

1、切面思想（包装函数和注解）提炼非业务相关代码

2、调用式加维护提炼业务相关代码

3、sql执行异常日志输出

4、减少代码中的项目差异，如命名规范（表名、列名、文件名、函数名）

5、精简和规范数仓设计，兼顾使用效率和执行效率