- 大数据
- 大数据 相关技术。
目录
- # 1. Hadoop
- 1-1. Hadoop 1-2. 环境安装 1-3. HDFS 1-4. winutils 1-5. IDEA中创建hadoop项目 1-6. Java操作 1-7. HDFS的数据流 1-8. NameNode 工作机制 1-9. DataNode 1-10. MapReduce 1-11. MapReduce原理 1-12. Yarn 1-13. Hadoop企业优化 1-14. Hadoop 新特性 1-15. 日志 1-16. Hadoop HA高可用
- # 3. Hive
- 3-1. 介绍 3-2. 环境 3-3. DBeaver 3-4. Hive 类型 3-5. Hive 客户端命令 3-6. DDL数据定义 3-7. DML 3-8. 查询 3-9. 函数 3-10. 自定义函数 3-11. 压缩和存储 3-12. 企业优化 3-13. Hive实战merge
- # 5. Kafka
- 5-1. Kafka 5-2. 架构 5-3. Kafka 安装 5-4. 命令操作 5-5. Kafka原理 5-6. Kafka API 5-7. Flume 对接 Kafka 5-8. Kafka监控 5-9. Kafka面试题
- # 6. Azkaban
- 6-1. Azkaban 6-2. 任务调度 6-3. 安装 6-4. Azkaban实战
- # 7. Hbase
- 7-1. Hbase 7-2. Hbase数据模型 7-3. Hbase 安装 7-4. Hbase shell 7-5. Hbase原理 7-6. Phoenix 7-7. Hbase与Hive的集成 7-8. HBase优化
- # 8. Scala
- 8-1. Scala介绍 8-2. Scala入门 8-3. 流程控制 8-4. 函数式编程 8-5. 面向对象
- # 9. Spark
- 9-1. Spark 9-2. Spark 入门 9-3. SprakCore 9-4. SparkSQL
- # 10. Flink
- 10-1. Flink 简介 10-2. Flink 部署 10-3. Flink 运行架构 10-4. Flink 流处理 API 10-5. Flink 中的 Window 10-6. Flink 时间语义与 Wartermark 10-7. ProcessFunction API
- # 11. 离线数仓
- 11-1. 数据仓库概念 11-2. 项目需求及架构设计 11-3. 数据生成模块 11-4. 数据采集模块 11-5. 电商业务简介 11-6. 业务数据采集模块 11-7. 数仓分层概念 11-8. 数仓搭建-ODS层 11-9. 数仓搭建-DWD层 11-10. 数仓搭建-DWS层 11-11. 数仓搭建-DWT层
- # 12. 青训营
- # 12-1. 第四届青训营12-1-1. SQL Optimizer 解析｜ 青训营笔记 12-1-2. 流／批／OLAP 一体的 Flink 引擎介绍｜ 青训营笔记 12-1-3. Exactly Once 语义在 Flink 中的实现｜ 青训营笔记 12-1-4. 流式计算中的 Window 计算｜ 青训营笔记 12-1-5. Spark 原理与实践｜ 青训营笔记 12-1-6. 大数据 Shuffle 原理与实践｜ 青训营笔记 12-1-7. Presto 架构原理与优化介绍｜ 青训营笔记 12-1-8. HDFS 原理与应用｜ 青训营笔记 12-1-9. HDFS 高可用与高扩展性机制分析｜ 青训营笔记 12-1-10. 深入浅出 HBase 实战｜ 青训营笔记 12-1-11. 数据湖三剑客：Delta Lake、Hudi 与 Iceberg｜ 青训营笔记 12-1-12. 从 Kafka 到 Pulsar 的数据流演进之路｜ 青训营笔记 12-1-13. Parquet 和 ORC：高性能列式存储｜ 青训营笔记 12-1-14. LSMT 存储引擎浅析｜ 青训营笔记 12-1-15. 浅谈分布式一致性协议｜ 青训营笔记 12-1-16. 走进 YARN 资源管理和调度｜ 青训营笔记 12-1-17. 深入理解 K8S 资源管理和调度｜ 青训营笔记 12-1-18. 实时数据中心建设思路与企业实践｜ 青训营笔记 12-1-19. 用户数据分析理论与最佳实践｜ 青训营笔记 12-1-20. 大数据可视化理论与案例分析｜ 青训营笔记
- # 13. DolphinScheduler
- 13-1. DolphinScheduler
- # 14. Doris
- 14-1. Doris 概述 14-2. 编译与安装 14-3. 数据表的创建
上次更新: 2023/12/06, 01:31:48