Hadoop 大数据技术 学习网站

第1章 Hadoop基础知识

第1周 · 4 学时 · 概念、生态

Hadoop 是什么、为什么能处理海量数据、生态里都有谁，以及它和 Spark 的分工。

第2章 搭建Hadoop分布式集群

第2–3周 · 8 学时 · 虚拟机、CentOS

从安装 VMware、装 CentOS 7 开始，一步步配出 3 节点高可用集群（ZooKeeper + HDFS HA

第3章 搭建Eclipse开发环境

第4周 · 4 学时 · 伪分布式、Eclipse

在 Windows 上用 Eclipse 写 MapReduce：伪分布式环境 + Hadoop 插件 + 跑通官方 W

第4章 Hadoop分布式文件系统

第5–6周 · 8 学时 · HDFS、副本

HDFS 为什么这么设计、数据怎么保证不丢、一次读和一次写各自经历了什么。

第5章 Hadoop的I/O操作

第7周 · 4 学时 · 数据完整性、序列化

数据在磁盘与网络之间怎么保证不坏、怎么变紧凑、怎么打包成合适的容器格式。

第6章 MapReduce基础与编程

第8–9周 · 8 学时 · 计算模型、Shuffle

MapReduce 怎么把一个大任务拆成很多小任务、Shuffle 到底做了什么、两个案例代码怎么落地。

第7章 Hive实战

第10–11周 · 8 学时 · 数据仓库、HiveQL

把 SQL 能力搬到 Hadoop 上：Hive 的存储格式、数据类型、HiveQL、自定义函数与 Sqoop 数据迁移

第8章 HBase实战

第12–13周 · 8 学时 · 列式存储、Shell

当需求从"批量分析"变成"随机实时读写"时，HBase 补上了 HDFS 的短板。

第9章 Spark实战

第14–15周 · 8 学时 · 内存计算、RDD

内存计算框架：RDD 是什么、算子怎么选、一个 WordCount 怎么用 Spark 写得比 MapReduce 短十

第10章 天气数据分析实战

第16周 · 4 学时 · 综合项目、全流程

把前面九章串成一个项目：采集天气数据 → Sqoop 入库 → 清洗去重分区 → 三类分析。

🚀 零基础起步

从装虚拟机到跑通第一个 MapReduce 程序

🧪 实操练习手册

24 道递进练习，含思路与参考答案

⌨️ 命令速查

集群/HDFS/YARN/HBase/Spark 常用命令

📚 术语表

核心概念一句话解释

🗺️ 知识地图

章依赖关系与知识点全景