实验1 · Linux、AI助手与HDFS
4学时,从导入镜像到验证一次文件存取
MARKDOWN PRESENTATIONS
分布式计算课程课件、实验与实训
4学时,从导入镜像到验证一次文件存取
4学时,从手算词频到YARN作业
4学时,用RDD、DataFrame与SQL核对销售统计
2学时,观察会话、节点与主节点交接
2学时,Structured Streaming窗口聚合与checkpoint
4–5人一组,自选主题,完成批流分析、展示与复现
从 AI 推理到分布式计算:为什么、是什么、怎么学
Spark Streaming 的设计思想(微批处理)、体系架构、工作原理、容错机制与编程示例
Hadoop 发展简史与 HDFS 的设计思想、体系架构、工作原理、容错机制与编程示例
批流融合的背景、批处理与流计算的统一性、Dataflow 统一编程模型、关系化 Dataflow 编程模型与一体化执行引擎
分布式协调服务 ZooKeeper 的设计思想、体系架构、工作原理、容错机制与典型示例
实时流计算与 Storm 的设计思想、体系架构、工作原理、容错机制与编程示例
MapReduce 的设计思想(MPI 对比、数据模型、计算模型)、体系架构、工作原理(Map-Shuffle-Reduce)、容错机制与编程示例
面向大规模图的 Pregel 计算模型与 Giraph 的设计思想、体系架构、工作原理、容错机制与编程示例
Flink 的设计思想、体系架构、工作原理、容错机制与编程示例
Spark 的设计思想、体系架构、工作原理、容错机制与编程示例
MapReduce 1.0 的局限与 Yarn 的设计思想、体系架构、工作原理、容错机制与典型示例
分布式系统、数据管理与分布式计算系统概览