每时每刻,我们都在产生大量的数据:微信聊天、地铁刷卡、 银行存储……大数据是一种在获取、存储、管理、分析等方面大大超出了传统数据库软件工具能力范围的数据集合。它具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。
助你掌握网络营销必备技能
多方位玩转网络营销技能
大数据项目介绍
项目一
基于 Hive 的狼码教育离线分析实战项目:狼码教育离线分析系统项目 , 是一个借鉴狼码教育公司系统的实际业务场景 , 引入海量的访问数据和业务数据 , 采用当前企业热门的大数据主流技术 , 从 0 到 1 开始构建好一套完整的离线数据仓库,然后进行数据分析,并使用 FineBI 显示分析结果的项目。
学习目标:
1、掌握项目各个核心业务分析; 2、熟练数据建模的设计与实现; 3、熟练掌握企业中用的核心的大数据开发技术; 4、熟练掌握大数据开发的整个流程; 5、理解数据仓库的特点; 6、理解数据仓库系统架构; 7、理解指标与维度; 8、理解下钻与上卷; 9、理解事实表与维度表; 10、理解星型模型和雪花模型; 11、理解缓慢渐变维; 12、掌握数据仓库分层方法
项目二
基于 Spark 的短视频运营决策分析离线实战项目:该短视频项目定位于中小城市的普通移动互联网用户,通过“裂变网赚”模式,以人传人的方式快速积累用户,完成用户爆发式的指数级增长,因此视频以内容消耗为主,区别于抖音以内容创作 + 内容消耗,通过算法分析完成精准推送的的模式。该项目基于对短视频领域的真实业务深入调研和分析 , 引入真实完整业务系统中的业务数据和用户行为数据,采用大数据主流技术 , 以及完整的数据仓库的建模和设计 , 通过运营分析指标为公司领导战略决策提供关键依据。
学习目标:
1、掌握短视频的各个核心业务分析;2、熟练数据建模的设计与实现;3、熟练掌握企业中用的核心的大数据开发技术;4、熟练掌握大数据开发的整个流程
项目三
基于 Flink 的互联网医院平台实时实战项目:近年来我国互联网医疗快速发展,到 2026 年将达到近 2,000 亿元。该互联网医疗分析项目主要的用户来源属于 B2B2C 模式 , 主要是通过互联网医院和各大连锁店的药房进行合作,比如说大参林药房,国大药房等,患者去药房咨询,如果需要开处方药信息,由于药房没有开处方药资质,则会通过互联网医院进行医生的咨询、诊断、开具相应的处方药。通过对互联网医院的业务分析和调研。
学习目标:
1、实时数仓平台搭建;2、实时数仓模型设计;3、医疗行业核心指标的设计和分析;4、具备大数据技术选型和相关参数的调优能力;5、Flink 平台的构建和设计实现 , 具备构建 PB 级别数量计算引擎
大数据基础
目标:掌握基本的数据分析能力和 ETL 数据仓库的处理能力
匹配岗位:数据库工程师、 数据分析师、ETL 工程师、数据仓库工程师
Linux、MySQL、ETL 开发实战、电商数据分析实战
阶段知识点:VMware 虚拟化、VI 编辑器、rpm 包管理器、yum 包管理器、SSH 协议、网络查看netstat、进程管理 ps、阿里云服务器环境搭建、SQL、多表查询、聚合函数、窗口函数、存储过程、视图和索引、日志和事务、SQL优化、数据仓库、基于 Python 的 ETL 开发、Kettle、ETL 数据处理、MySQL 数据存储、FineBI 数据可视化
核心知识点:1、具备 Linux 操作系统的基本管理知识
2、熟练掌握 shell 脚本编程
3、熟练掌握数据库操作以及各种复杂查询技术
4、掌握 ETL 数据仓库的处理和分析立即预约课程