2022年大数据基础讲课笔记

Posted 2022-11-02 howard2005

一、讲课笔记

项目一、Linux基础

1. 大数据讲课笔记1.1 安装配置CentOS [在OpenStack私有云上安装配置虚拟机]
2. 大数据讲课笔记1.2 Linux用户操作
3. 大数据讲课笔记1.3 Linux目录操作
4. 大数据讲课笔记1.4 进程管理
5. 大数据讲课笔记1.5 使用Vim编辑器
6. 大数据讲课笔记1.6 压缩与打包
7. 大数据讲课笔记1.7 软件包管理器RPM与yum
8. 大数据讲课笔记1.8 打好shell基础

项目二、初识Hadoop

1. 大数据讲课笔记2.1 初探大数据
2. 大数据讲课笔记2.2 大数据应用场景
3. 大数据讲课笔记2.3 初探Hadoop世界

项目三、Hadoop集群构建

1. 大数据讲课笔记3.1 Hadoop安装准备
2. 大数据讲课笔记3.2 Hadoop部署模式
3. 大数据讲课笔记3.3 Hadoop集群配置
4. 大数据讲课笔记3.4 Hadoop集群测试

项目四、HDFS分布式文件系统

1. 大数据讲课笔记4.1 HDFS基本概念
2. 大数据讲课笔记4.2 HDFS架构和原理
3. 大数据讲课笔记4.3 HDFS的shell操作
4. 大数据讲课笔记4.4 使用Java API操作HDFS

项目五、MapReduce分布式计算框架

1. 大数据讲课笔记5.1 初探MapReduce
2. 大数据讲课笔记5.2 MapReduce工作原理
3. 大数据讲课笔记5.3 MapReduce编程组件
4. 大数据讲课笔记5.4 MapReduce运行模式
5. 大数据讲课笔记5.5 MR案例——倒排索引
6. 大数据讲课笔记5.6 MR案例—数据去重
7. 大数据讲课笔记5.7 MR案例—TopN

项目六、ZooKeeper分布式协调服务

1. 大数据讲课笔记6.1 初识ZooKeeper
2. 大数据讲课笔记6.2 ZooKeeper数据模型
3. 大数据讲课笔记6.3 ZooKeeper两种重要机制
4. 大数据讲课笔记6.4 ZooKeeper分布式集群部署
5. 大数据讲课笔记6.5 ZooKeeper的Shell操作
6. 大数据讲课笔记6.6 ZooKeeper的Java API操作

实训任务

1. 实训任务1：Linux基本操作
2. 实训任务2：部署Web项目