大数据之实时数仓分层项目实战-学习猿地 -成就自己的只需一套精品-IT在线教育平台

大数据之实时数仓分层项目实战收藏

38人加入学习

更新时间

2024-04-26

课程价格

￥512 ￥64会员免费

课程任务

9 个

课程节数

140 个

课程时长

35课时

基于HBase和Kafka作数仓分层；数据原始层ODS，通Canal或MaxWell监听数据库binlog，打入Kafka；通过Flink流式处理清洗数据，并拆分出事实表数据和维度表数据，维度表数据写入HBase，事实表写入Kafka；Flink流式处理对接第二层Kafka，进行流与流Join得到聚合数据；流数据聚合后再使用Flink Async IO功能关联HBase维度表数据，获得宽表数据；通过Flink将宽表数据写入HBase中；HBase宽表rowkey设计

P_01: 001_尚硅谷大数据技术_flink理论_flink简介（一）flink是什么

05:48

P_02: 002_尚硅谷大数据技术_flink理论_flink简介（二）为什么要用flink

13:55

P_03: 003_尚硅谷大数据技术_flink理论_flink简介（三）流数据处理的行业

15:08

P_04: 004_尚硅谷大数据技术_flink理论_flink简介（四）流处理的发展演变

17:42

P_05: 005_尚硅谷大数据技术_flink理论_flink简介（五）flink的特点

09:14

P_06: 006_尚硅谷大数据技术_flink理论_flink简介（六）flink vs spark streaming

08:00

P_07: 007_尚硅谷大数据技术_flink理论_简单上手（一）批处理wordcount

26:36

P_08: 008_尚硅谷大数据技术_flink理论_简单上手（二）流处理wordcount

13:51

P_09: 009_尚硅谷大数据技术_flink理论_简单上手（三）流式数据源测试

10:59

P_10: 010_尚硅谷大数据技术_flink理论_flink部署（一）flink安装和配置

27:53

P_11: 011_尚硅谷大数据技术_flink理论_flink部署（二）job的提交运行

24:18

P_12: 012_尚硅谷大数据技术_flink理论_flink部署（三）资源的分配和并行度测试

07:05

P_13: 013_尚硅谷大数据技术_flink理论_flink部署（四）命令行提交job

06:54

P_14: 014_尚硅谷大数据技术_flink理论_flink部署（五）yarn和k8s平台的flink部署

14:07

P_15: 015_尚硅谷大数据技术_flink理论_运行时架构（一）flink四大组件

11:29

P_16: 016_尚硅谷大数据技术_flink理论_运行时架构（二）作业提交流程_抽象架构

04:48

P_17: 017_尚硅谷大数据技术_flink理论_运行时架构（三）yarn上作业提交流程

04:51

P_18: 018_尚硅谷大数据技术_flink理论_运行时架构（四）作业调度原理及思考问题

07:26

P_19: 文档课件

汪老师

课程数: 3门

学生数: 139人

长期致力于大数据技术的研究和培训工作。曾就职于思华科技，金风科技等知名企业，曾参与开发混合可再生能源预测、智能学习行为分析系统等项目。对Hadoop、Hive、Flume、Kafka、HBase、Spark等主流大数据框架有深入研究。授课认真细致，对技术的讲解清晰易懂。

1

实时数据采集系统【大数据】

2

大数据 - 电商数仓项目

3

大数据之实时数仓分层项目实战

publichj

子午线

lyy_yy01

伟仔

xh4528

rlagh7758

rosendal

whunicorn

moran

ypengju

yukee

munan

806977556

bawnagling

baldur

andytang

新手指南

热门学科

帮助中心

 学习猿地官方QQ群



学习猿地
程序员学习的地方

 扫码关注