首页 存档 技术 查看内容

免费微课 | 基于spark构建企业级流式处理系统

2018-3-30 13:00 |来自: 互联网 257 0

摘要: 主讲人:董西成 《Hadoop技术内幕:深入解析MapReduce架构设计与实现原理》和《Hadoop技术内幕:深入解析YARN架构设计与实现原理》作者; 资深Hadoop技术实践者和研究者,曾参与商用Hadoop原型研发,以及分布式 ...


主讲人:董西成



《Hadoop技术内幕:深入解析MapReduce架构设计与实现原理》和《Hadoop技术内幕:深入解析YARN架构设计与实现原理》作者;

资深Hadoop技术实践者和研究者,曾参与商用Hadoop原型研发,以及分布式日志系统、全网图片搜索引擎、Hadoop调度器等项目的设计。



主题:基于spark构建企业级流式处理系统


时间:4月5日 20:00-22:00


形式:视频直播

课程大纲:


1. 流式处理典型应用场景

网站指标实时统计系统

用户行为实时分析系统

实时推荐系统

风控系统


2. 流式计算引擎分类

涉及storm,spark streaming,flink及apache beam等系统分类

流式计算框架的现状与未来


3. 流式处理管道构建

经典的kafka spark streaming mysql/hbase架构剖析


4. 流式处理系统关键技术点探讨

吞吐量与延迟

数据延迟到达与乱序

数据一致性语义(事务,幂等操作等)


5. 流式计算应用

基于spark构建用户行为实时分析系统,包括背景,架构,可视化等



如何报名:


点击下方【阅读原文】即可进入公开课

昵称请随意填写

请4月5日(今晚)八点按时进入哦~

声明:文章版权归原作者所有 部分文章转自互联网 如有侵权请联系 [邮箱地址] 删除

路过

雷人

握手

鲜花

鸡蛋

相关分类

返回顶部