菜单 学习猿地 - LMONKEY

VIP

开通学习猿地VIP

尊享10项VIP特权 持续新增

知识通关挑战

打卡带练!告别无效练习

接私单赚外块

VIP优先接,累计金额超百万

学习猿地私房课免费学

大厂实战课仅对VIP开放

你的一对一导师

每月可免费咨询大牛30次

领取更多软件工程师实用特权

入驻

大数据应用项目实战 收藏

502人加入学习
更新时间
2022-09-25
课程价格
¥512 ¥256会员免费
课程任务
1 个
课程节数
6 个
课程时长
1课时

java

java

大数据应用需求分析、设计、开发、部署,根据这些原始信息检测账号是否存在异常, 如果多个终端使用同一个宽带账号,超过一定阈值则触发报警机制,例如阈值为5时,同一个账号同时连接的终端数量不能超过该值,如果超过则报警。数据量每天1000亿,每秒峰值100 000,l 5分钟是一个周期,每个周期生成一个结果文件,每个周期检测一次共享账号。

java

java

应知应会:

java

1.了解企业大数据应用设计规范和编码规则

2.掌握企业大数据应用分析、设计方法

3.熟悉大数据批处理、流式处理应用开发流程

4.掌握项目的业务需求

5.掌握项目的系统架构

6.掌握项目的需求分析

7.掌握项目的概要设计

8.掌握项目的详细设计

9.掌握项目的系统开发

10.掌握项目的单元测试

11.掌握项目的系统测试

12.掌握项目的上线部署

13.掌握项目的运营测试

14.掌握项目集群环境的搭建测试

java

项目实战:

java

大数据应用需求分析、设计、开发、部署

java

主要知识点:

java
☑ 业务需求分析

☑ 系统设计

☑ 数据采集

☑ 数据预处理

☑ ETL开发

☑ 统计分析(PV统计、受访分析、访客分析、访问分析等)

☑ 流式处理系统的设计、开发

java

java

学习基础:

java

学此阶段需要掌握Scala基础语法、数据结构、面向对象编程、函数式编程;Scala应用开发, 掌握Spark集群的安装、配置、使用;Spark核心概念、基本原理;Spark RDD、Spark SQL、Spark Streaming应用开发, ,了解企业大数据应用设计规范和编码规则,掌握大数据应用开发。

java

java

java

主讲老师

李建龙

课程数: 10门
学生数: 11.2千人
学习猿地 合伙人,清华大学数学专业硕士毕业,现任某企大数据部总监。曾任职于联想、美团等公司,在电商、医疗、出行等内容领域有丰富的数据产品实践,也有非富的数据分析经验。精通JAVAEE、分布式开发和离线处理计算、Hadoop、Flume、kafka、Spark、ELK等技术。
最新成员

伟仔

icyj

qinhan

splanzg13

RSDTE

打工仔

zhaodeyong

shangkdj

shunbu

wzf65686

renjianlin

zhanglinguang

xing_666

Iznpun6_hcf

winter20190722

maskzhao

为你推荐 换一批