外部工具连接SaaS模式云数仓MaxCompute 实战—— 数据库管理工具篇

Posted 阿里云开发者

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了外部工具连接SaaS模式云数仓MaxCompute 实战—— 数据库管理工具篇相关的知识,希望对你有一定的参考价值。

简介:本次直播将主要分享MaxCompute查询加速功能、数据库管理工具DBeaver、DataGrip、SQL Workbench/J的部分连接演示。

作者 木弈 阿里云智能 产品经理


直播视频请点击 直播 观看。


本次分享将从四个方面讲解。

01 上节回顾

02 数据库管理工具概览

03 实操展示

04 查询加速


一、上节回顾

在第一讲中我们主要讲了 MaxCompute 生态,重点介绍了商业BI工具,包括Tableau、FineReport、FineBI、Quick BI、Yonghong Desktop BI工具的连接原理以及实操的展示。本文主讲数据库管理工具,主要是开发管理部分的DataGrip、DBeaver、SQL Workbench/J。

二、数据库管理工具概览

数据库管理工具,即数据库图形化工具,是数据库人员必需的工具之一,MaxCompute支持与DBeaver、DataGrip和SQL Workbench/J 通过JDBC驱动连接,并可以形象化方便快捷地进行列举数据库、列举表、查看表结构、查询表数据、建表、写表、建视图、查询视图等相关操作。

连接方式

JDBC

JDBC(Java DataBase Connectivity)是一种用于执行SQL语句的Java API,可以为多种关系数据库提供统一访问,它由一组用Java语言编写的类和接口组成。简单来说就是用Java语言向数据库发送SQL语句来操作数据库。


MaxCompute JDBC 驱动

MaxCompute JDBC 驱动是 MaxCompute 提供的可以访问 MaxCompute 的JDBC接口。您可以通过标准的JDBC 接口基于 MaxCompute 执行海量数据的分布式计算查询。MaxCompute JDBC 驱动还可以用于连接MaxCompute 和支持 JDBC 的工具。


MaxCompute 相关基本参数信息

•URL:jdbc:odps:<MaxCompute_endpoint>?project=<MaxCompute_project_name>

  • :必填。MaxCompute项目所属区域的Endpoint。
  • :必填。待连接的目标MaxCompute项目名称。此处为MaxCompute项目名称,非工作空间名称。

•User:有访问指定项目权限的AccessKey ID。

•Password :AccessKey ID对应的AccessKey Secret。


三、实操展示

DBeaver实操展示

请点击 视频 查看实操部分

其他实操文档

DataGrip连接MaxCompute

SQL Workbench/J连接MaxCompute


四、查询加速

MaxCompute 查询加速 – 针对实时性要求高的查询作业,全链路加快 MaxCompute 查询执行速度

使用MaxComputeSQL语法和引擎,针对近实时场景进行优化

系统自动进行查询优化选择,同时支持用户选择延时优先还是吞吐优先的执行方式

•针对近实时场景使用不同的资源调度策略:latencybased

•针对低延时要求的场景进行全链路优化独立执行资源池;多层次的数据和meta Caching;交互协议优化



QuickBI查询加速

其他工具查询加速-&interactiveMode=true

  • interactiveMode:可选。查询加速功能开关。如果您需要启用查询加速功能,在URL后追加&interactiveMode=true配置即可。更多查询加速功能信息,请参见查询加速


是否启动查询加速功能查询速度对比

使用Davinci测试对比

查询数据量

不使用查询加速功能

使用查询加速功能

1w

10s

3s

5w

12s

7s


对比实操视频

请点击 视频 查看实操部分

原文链接:https://developer.aliyun.com/article/785970?

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

以上是关于外部工具连接SaaS模式云数仓MaxCompute 实战—— 数据库管理工具篇的主要内容,如果未能解决你的问题,请参考以下文章

2021阿里巴巴大数据技术公开课第一季:外部工具连接SaaS模式云数仓MaxCompute实战

外部工具连接SaaS模式云数据仓库MaxCompute实战——商业BI分析工具篇

外部工具连接SaaS模式云数据仓库MaxCompute实战:商业BI分析工具篇

《Saas模式云原生数据仓库应用场景实践》激活数据生产力,让分析产生价值

揭秘阿里云EB级大数据计算引擎MaxCompute

揭秘阿里云EB级大数据计算引擎MaxCompute