《黑马-小白从零快速掌握数据湖架构开发(最新技术Delta Lake)》是一套面向数据湖初学者打造的实战型课程,重点围绕当前主流的数据湖技术Delta Lake展开,从基础概念到项目实践循序渐进,帮助零基础学习者快速理解数据湖架构,并掌握企业级数据湖开发中的核心技术与应用方法。
课程首先从传统数据仓库、大数据平台与数据湖的基本概念讲起,通过对比不同数据架构的特点,帮助学习者建立数据湖整体认知。随后进入Delta Lake核心技术学习,深入讲解事务日志、ACID事务、数据版本管理、Schema管理、数据更新与删除等关键机制,让学习者理解Delta Lake如何解决传统数据湖在数据一致性、可靠性以及数据管理方面存在的问题。
在实战部分,课程结合Spark等大数据技术,讲解Delta Lake环境搭建、数据写入、数据读取、增量处理、数据更新、历史版本查询以及Schema演进等常见操作,并通过实际业务场景帮助学习者掌握数据湖开发流程。同时进一步了解批处理与流处理结合、数据湖表管理以及数据湖在实时数仓和企业数据平台中的应用方式。
课程注重从“小白视角”进行知识拆解,降低数据湖技术的学习门槛,让学习者能够在理解原理的基础上逐步完成实际开发。适合零基础大数据学习者、Java及数据开发人员、数仓工程师以及希望转型数据湖方向的技术人员。通过系统学习,可以建立Delta Lake数据湖开发知识体系,为后续深入学习湖仓一体、实时数据处理以及企业级大数据架构打下基础。

课程目录:
黑马-小白从零快速掌握数据湖架构开发(最新技术Delta Lake)/
│ ├── 1-第一章/
│ │ ├── 00-课程目标.mp4 (3.78 MB)
│ │ ├── 01-1-1-企业的数据困扰.mp4 (83.65 MB)
│ │ ├── 01-1-2-补充-结构化-半结构化-非结构化数据.mp4 (44.70 MB)
│ │ ├── 01-2-数据湖的概念.mp4 (50.14 MB)
│ │ └── 01-3-数据湖-数仓-数据集市的区别.mp4 (81.02 MB)
│ ├── 2-第二章/
│ │ ├── 02-1-写时模式和读时模式.mp4 (7.80 MB)
│ │ ├── 02-2-3种常见的数据湖实现方案.mp4 (155.68 MB)
│ │ ├── 02-3-数据湖对企业的价值.mp4 (35.85 MB)
│ │ ├── 02-4-数据湖概念的总结.mp4 (75.38 MB)
│ │ ├── 02-5-数据湖的4个设计原则.mp4 (73.45 MB)
│ │ └── 2-第二章文档.png (0.48 MB)
│ ├── 3-第三章/
│ │ ├── 3-第三章资料.zip (1.83 MB)
│ │ └── 03-Lambda架构的简单介绍.mp4 (358.82 MB)
│ ├── 4-第四章/
│ │ ├── 4-第四章资料.zip (1.83 MB)
│ │ └── 04-数据湖的核心以及和普通大数据分析平台的不同.mp4 (229.84 MB)
│ ├── 5-第五章/
│ │ ├── 05-1-DeltaLake的简介和重点特性解读.mp4 (182.48 MB)
│ │ └── 05-2-DeltaLake的使用形式.mp4 (78.90 MB)
│ ├── 6-第六章/
│ │ ├── 06-1-DeltaLake创建表-读取表-覆盖表操作.mp4 (21.75 MB)
│ │ ├── 06-2-DeltaLake有条件更新和合并操作.mp4 (87.99 MB)
│ │ ├── 06-3-DeltaLake的数据版本控制.mp4 (91.98 MB)
│ │ ├── 06-4-DeltaLake的事务日志.mp4 (126.50 MB)
│ │ └── 6-第六章说明.png (0.48 MB)
│ ├── 7-第七章/
│ │ ├── 07-1-DeltaLake表分区和追加.mp4 (123.43 MB)
│ │ ├── 07-2-DeltaLake-Schema验证.mp4 (242.02 MB)
│ │ ├── 07-3-DeltaLake-更新和删除对Parquet数据文件的影响.mp4 (173.80 MB)
│ │ ├── 07-4-DeltaLake-vacuum方法.mp4 (224.21 MB)
│ │ ├── 07-5-DeltaLake-表常用工具和阶段总结.mp4 (175.38 MB)
│ │ └── 7-第七章文档.zip (1.83 MB)
│ ├── 8-第八章/
│ │ ├── 08-1-DeltaLake-事务日志概念回顾.mp4 (140.02 MB)
│ │ ├── 08-2-DeltaLake-Schema演化相关概念回顾.mp4 (62.10 MB)
│ │ └── 08-3-DeltaLake-最佳实践和总结.mp4 (204.30 MB)
│ ├── 9-第九章/
│ │ ├── 09-1-案例需求分析.mp4 (11.76 MB)
│ │ ├── 09-2-1-基础数据(中间数据)的准备.mp4 (383.56 MB)
│ │ ├── 09-2-2-基础数据增加新列.mp4 (112.21 MB)
│ │ ├── 09-2-3-统计每小时TOP10热门查询关键词.mp4 (455.28 MB)
│ │ ├── 09-2-4-统计全天热门TOP100查询关键词.mp4 (250.99 MB)
│ │ ├── 09-2-5-导出数据为普通parquet文件.mp4 (63.27 MB)
│ │ ├── 09-3-第九章总结.mp4 (23.74 MB)
│ │ └── 9-第九章说明.png (0.48 MB)
│ └── 10-第十章/
│ │ ├── 10-1-1云平台的基础概念.mp4 (153.59 MB)
│ │ ├── 10-1-2-两类云平台和主流公有云平台介绍.mp4 (59.14 MB)
│ │ ├── 10-1-3-IaaS-PaaS-SaaS的概念.mp4 (54.67 MB)
│ │ ├── 10-1-4-云平台对企业的意义.mp4 (58.31 MB)
│ │ ├── 10-2-1-AWS-S3简介.mp4 (146.96 MB)
│ │ ├── 10-2-2-AWS-Athena分析框架简介.mp4 (114.65 MB)
│ │ ├── 10-2-3-AWS-EMR-集群模式介绍.mp4 (411.08 MB)
│ │ ├── 10-2-4-AWS-EMR-步骤运行模式介绍.mp4 (287.67 MB)
│ │ ├── 10-2-5-AWS-Glue-ETl-简单介绍.mp4 (287.72 MB)
│ │ ├── 10-2-6-AWS-其它辅助工具介绍和课程总结.mp4 (43.81 MB)
│ │ └── 10-第十章必看.png (0.48 MB)
侵权联系与免责声明: 1、本站资源所有内容均收集于网络,与本网站立场无关 2、本站所有资源收集于互联网,由用户分享,该帖子作者与IT课程网不享有任何版权,如有侵权请联系本站删除 3、本站部分内容转载自其它网站,但并不代表本站赞同其观点和对其真实性负责 4、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除并致以最深的歉意。如有侵权请联系联系客服QQ:1960026872或登录本站账号进入个人中心提交工单留言反馈,我们将第一时间处理!
