班级规模及环境--热线:4008699035 手机:15921673576( 微信同号) |
每个班级的人数限3到5人,互动授课, 保障效果,小班授课。 |
上间和地点 |
上部份地点:【上海】同济大学(沪西)/新城金郡商务楼(11号线白银路站)【深圳分部】:电影大厦(地铁一号线大剧院站)/深圳大学成教院【北京分部】:北京中山学院/福鑫大楼【南京分部】:金港大厦(和燕路)【武汉分部】:佳源大厦(高新二路)【成都分部】:领馆区1号(中和大道)【沈阳分部】:沈阳理工大学/六宅臻品【郑州分部】:郑州大学/锦华大厦【石家庄分部】:河北科技大学/瑞景大厦 最近开间(周末班/连续班/晚班):2019年1月26日 |
实验设备 |
◆小班教学,教学效果好 ☆注重质量☆边讲边练 ☆合格学员免费推荐工作 ★实验设备请点击这儿查看★ |
质量保障 |
1、培训过程中,如有部分内容理解不透或消化不好,可免费在以后培训班中重听; 2、培训结束后,授课老师留给学员联系方式,保障培训效果,免费提供课后技术支持。 3、培训合格学员可享受免费推荐就业机会。☆合格学员免费颁发相关工程师等资格证书,提升职业资质。专注高端技术培训15年,端海学员的能力得到大家的认同,受到用人单位的广泛赞誉,端海的证书受到广泛认可。 |
部份程大纲 |
|
- 目标收益
NiFi这个项目在2015年7月成功成为Apache开源社区的顶级项目,NiFi之前是在美国国家安全局使用了8年的一个可视化,可定制的数据集成产品,2014年贡献给了Apache开源社区。我们认为NiFi的出现填补的大数据集成领域的空白, 它不仅提供了可视化的工具实现大数据环境下不同系统之间进行数据移动和互联互通如SQL,HDFS,Kafka, HBASE, Solr,HTTP(s)、(s)FTP 而且还可以以可视化的方式进行各种数据格式的转换,json,xml,avro等。NiFi的出现使得大数据环境下的数据移动变得简单、高效、安全、可视 化,大大方便了业务和开发人员。
- 培训对象
- 大数据开发团队、大数据运维团队、数据采集和ETL人员、数据治理和管理人员
- 课程大纲
- 主题 内容
模块 1:Nifi原理和架构
- Nifi的功能概述
Nifi原理和架构
Nifi基本模块介绍
Nifi Groups、Processor、queue和connector模块介绍
Nifi toolbar 界面演示
- 模块2:Nifi安装和配置
- Nifi单机版安装
Nifi分布式安装
Nifi slaves节点配置
数据丢失容错和保证交付
低延迟和高吞吐量
动态优先级
流可以在运行时修改
- 模块3:GUI 操作介绍
- 无缝体验设计、控制和监视
processor的create、stop、start、restart、delete等操作
- 模块4:Nifi自带处理器介绍
- Processor的原理和功能
Kafka Processor介绍和实战
JMS Processor介绍和实战
Hbase、Cassandera、redis Processor介绍和实战
Hdfs Processor、spark Streaming实战
JDBC Processor介绍和实战
FTP、Http、XML、Json Processor介绍和实战
- 模块5:创建Nifi数据流
- 创建发送/接收目录
getFile和putFile Processor创建
创建复制文件从发送放到接收
创建Queue队列
- 模块6:创建高级数据流
- 自定义文件名
添加自定义属性
添加正则表达式
实现Path过滤规则
- 模块7:Nifi安全
- 创建用户、用户组、角色
SSL,SSH,HTTPS加密认证
可插拔的基于角色的验证/授权
基于webUI的SLA认证授权
- 模块8:创建Nifi处理器
- 实现一个Kafka、JMS到HDFS的流程设计
查看运行日志
查看监控
- 模块9:Nifi集群配置和管理
- Nifi集群添加节点
删除节点
Nifi性能优化
Slaves节点的负载均衡配置
制定特定的Processor到特定的node节点
集群动态负载均衡配置
- 模块10:用户自定义处理器
- eclipse工程创建
实现一个FilterFileProcessor功能
编译&添加到Nifi的lib下面
创建用户自定义的FilterFile处理器
- 模块11:Nifi实战
- Nifi在互联网的使用实战
Nifi在某大型商业银行实战案例分享
|