湖仓一体电商项目:项目使用技术及版本和基础环境准备

Posted Lansonli

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了湖仓一体电商项目:项目使用技术及版本和基础环境准备相关的知识,希望对你有一定的参考价值。

文章目录

项目使用技术及版本和基础环境准备

一、项目使用技术及版本

二、项目基础环境准备


项目使用技术及版本和基础环境准备

一、项目使用技术及版本

下表列出项目中使用的大数据技术组件及各个组件的版本,如下:

使用技术

版本

zookeeper

3.4.13

HDFS

3.1.4/3.2.2

Hive

3.1.2(MySQL 5.7.32)

iceberg

0.11.1

Hbase

2.2.6

phoenix

5.0.0

kafka

0.11.0.3

redis

2.8.18

flink

1.11.6

flume

1.9.0

maxwell

1.28.2

clickhouse

21.9.4.35

二、项目基础环境准备

这里我们使用5台节点来安装各个大数据组件,每台节点给了3G内存,4个core,并且每台节点已经关闭防火墙、配置主机名、设置yum源、各个节点时间同步、各个节点两两免密、安装JDK操作。5台节点信息如下:

节点IP

节点名称

192.168.179.4

node1

192.168.179.5

node2

192.168.179.6

node3

192.168.179.7

node4

192.168.179.8

node5

下篇一一进行基础技术组件搭建。


  • 📢博客主页:https://lansonli.blog.csdn.net
  • 📢欢迎点赞 👍 收藏 ⭐留言 📝 如有错误敬请指正!
  • 📢本文由 Lansonli 原创,首发于 CSDN博客🙉
  • 📢停下休息的时候不要忘了别人还在奔跑,希望大家抓紧时间学习,全力奔赴更美好的生活✨

以上是关于湖仓一体电商项目:项目使用技术及版本和基础环境准备的主要内容,如果未能解决你的问题,请参考以下文章

湖仓一体电商项目(十四):实时任务执行流程

湖仓一体电商项目(二十二):实时任务执行流程

湖仓一体电商项目:业务需求和分层设计及流程图

湖仓一体电商项目:3万字带你从头开始搭建12个大数据项目基础组件

湖仓一体电商项目(十五):实时统计商品及一级种类二级种类访问排行业务需求和分层设计及流程图

湖仓一体电商项目:业务实现之编写写入DIM层业务代码