ClickhouseClinkhouse-local 介绍

Posted 2023-02-27 九师兄

2023年1月21日 过年了 过年了 发几个博客 庆祝一下。

1.概述

clickhouse 官网对 clockhouse-local的解释

The clickhouse-local program enables you to perform fast processing on local files, without having to deploy and configure the ClickHouse server.

clickhouse-local uses the same core as ClickHouse server, SO it supports most of the features and the same set of formats and table engines.

ClickHouse-local程序使您能够对本地文件执行快速处理，而无需部署和配置ClickHouse服务器。

ClickHouse -local使用与ClickHouse服务器相同的核心，所以它支持大部分功能和相同的一组格式和表格引擎。

这里的功能让我想到，以前我们写入clickhouse 是将数据写入到clickhouse服务器，然后clickhouse服务器，将数据组装成自己需要的文件格式。

但是这种是可以实现在上游，多台机器都可以事先把数据转换成clickhouse需要的数据格式，然后再将数据格式文件发送到clickhouse server，这样就将clickhouse的压力，扔给了上游，而上游写入我们一般是可以扩大并行度，让多台机器参与的，这样就能提高写入效率