黑猴子的家：Hive 本地模式

Posted 2023-05-17

参考技术A

大多数的Hadoop Job是需要Hadoop提供的完整的可扩展性来处理大数据集的。不过，有时Hive的输入数据量是非常小的。在这种情况下，为查询触发执行任务时消耗可能会比实际job的执行时间要多的多。对于大多数这种情况，Hive可以通过本地模式在单台机器上处理所有的任务。对于小数据集，执行时间可以明显被缩短。

用户可以通过设置hive.exec.mode.local.auto的值为true，来让Hive在适当的时候自动启动这个优化。

案例实操

1）开启本地模式，并执行查询语句

2）关闭本地模式，并执行查询语句

黑猴子的家：华为 OpenEuler(欧拉) Linux 之基本配置 - openEuler-20.03-LTS

参考技术A 1）查看系统内核

2）编辑openEuler_x86_64.repo文件
x86_64架构

aarch64架构

3）yum make cache 一下

1）创建/mnt/cdrom目录

2）挂载ISO镜像

3）安装httpd和 vim服务

4）创建openeuler 目录

5）复制rpm包

6）编辑openEuler_x86_64_local.repo文件

7）yum make cache一下

1）修改静态IP

2）拔下ens33网卡

3）插上ens33网卡

1）关闭防火墙

2）开机禁止启动防火墙

3）查看防火墙状态