2.5.hadoop的配置文件 设置
{{ interaction.likeNum == 0 ? (pageType === 'video' ? '抢首赞' : '点赞') : formatNumber(interaction.likeNum) }}
{{ interaction.collectionNum == 0 ? '收藏' : formatNumber(interaction.collectionNum) }}
{{ interaction.discussNum == 0 ? (pageType === 'video' ? '抢沙发' : '讨论') : formatNumber(interaction.discussNum) }}
分享
适合人群
IT相关从业人员,大数据工程师,数据库工程师及DBA,数据架构师,数据仓库ETL,IT运维人员
你将会学到
01.掌握电信数据仓库项目建设的流程和实践方法;
- 01.掌握电信数据仓库项目建设的流程和实践方法;
- 02.了解电信项目的整理流程和实操方法,为个人求职履历填上浓墨重彩的一笔;
- 03.通过项目,巩固大数据Hadoop集群 Redis Flume DataX的相关知识;
课程简介
信运营商每时每刻会产生大量的通信数据,例如记录,短信记录,彩信记录,第三方服务资费等等繁多信息。数据量如此巨大,除了要满足用户的实时查询和展示之外,还需要定时定期的对已有数据进行离线的分析处理。
电信客服综合案例就是以此为切入点所开发的大数据实战案例。在本课程中,你将学习到,项目架构搭建,数据生产,数据消费,数据分析,以及数据展示等项目核心业务功能的实现。
Hadoop+Hbase+Flume+QuickBI实现电信级海量通话日志数据的存储,随机访问与实时读写。通过hash技术对rowkey进行分析处理,解决hbase的热点问题,协同coprocessor,解决系统的高吞吐量和查询负载问题以及如何避免中间结果导致通知风暴或死递归问题,让同学们体验到大数据技术在企业中实战应用。
1.整体架构分析
Hadoop体系架构与ha配置方案。
Hbase体系架构与ha配置方案
Flume实时收集架构方案。
SSM实现前端web实现以及与后端HBase的交互架构方案。
Five+Oozie实现的周期任务调度。
Spark Streaming实现窗口化敏感词实时监控方案
展开更多
{{tips.text}}
{{ noteHeaderTitle }}
笔记{{ hasMyNote ? '我的笔记' : '记笔记' }}
{{ hasMyNote ? '我的笔记' : '记笔记' }}
优质笔记
更新于:{{ $dayjs.formate('YYYY-MM-DD HH:mm:ss', item.last_uptime*1000) }}
{{ detail.username }}
公开笔记对他人可见,有机会被管理员评为“优质笔记”
{{ noteEditor.content.length }}/2000
公开笔记
保存提问
讲师收到你的提问会尽快为你解答。若选择公开提问,可以获得更多学员的帮助。
记录时间点
记录提问时视频播放的时间点,便于后续查看
公开提问
提交课程大纲
自动连播
49课时
电信大数据项目离线数仓实训从入门到精通
6111人学习
张晨光
5.0
¥80.00
37课时
大数据入门与核心技术项目实战视频课程(0基础学习)
217282人学习
柠檬
4.7
免费
129课时
Hadoop大数据基础与提升
178511人学习
任亮
4.9
¥599.00
56课时
【徐葳】Flink进阶及实战(下)
120678人学习
徐葳
4.9
¥359.00
36课时
大数据运维架构师培训(1):Hadoop集群(HDFS,MR,Yarn),Zookeeper集群
87056人学习
风哥
5.0
¥499.00
105课时
Spark大数据处理及机器学习【基于Python的Spark 2.3**版】
80042人学习
张敏
5.0
¥399.00
107课时
大数据Hadoop生态圈体系完整视频课程
78526人学习
陈建平
4.8
¥366.00
13课时
Hadoop基础视频教程
57562人学习
昭帆讲师
5.0
免费