clickhouse微信基于Clickhouse的实时数仓

Posted 2023-01-22 九师兄

2023年1月21日 过年了 过年了 发几个博客 庆祝一下。

1.概述

直播回放：ClickHouse Online Summer Meetup China 2022

2、背景

数据分析场景

2. Hadoop数仓下的困境

视频号等推荐系统的对个性化体验强烈诉求，催生了“亚秒级”分析系统的诞生

设计目标:

• 亚秒级响应:亿行数据亚秒响应、万亿行数据秒级返回，支持A/B实验平台，BI分析等复杂指标计算场景，可追踪明细;

• 海量数据低时延:百亿级吞吐下的秒级接，入时延,满足实时指标统计、异常检测需求;

• 极简架构:批流一体, T+1、Realtime分析模型统一，简单易运维 ;

• 高可用:数据接入有精确一次保障，单集群99.99% SLA。

在OLAP场景构建Clickhouse计算存储