新一代大数据计算引擎 Flink从入门到实战
阿里巴巴等众多公司引领的Flink 风潮,让会Flink 的人才供不应求,抢手之极
课程介绍
新一代大数据计算引擎 Flink从入门到实战
随着云计算和大数据的快速发展,在企业中需要处理和分析的数据量越来越大,随着Flink社区的快速发展,很多公司采用以Flink为核心技术栈来打造统一的大数据处理平台 ,Flink正变得越来越火,此时学习,正当其时。课程中从核心知识的多语言(Java-Scala)讲解到部署实战,循序渐进,助力系统入门Flink企业级应用
课程目录
第1章 初识Flink
了解Flink是什么,Flink应用程序运行的多样化,对比业界常用的流处理框架,Flink的发展趋势,Flink生态圈,Flink应用场景及Flink如何进行高效的Flink学习。
第2章 快速上手开发第一个Flink应用程序
动手搭建Flink的开发环境,快速使用Java和Scala语言开发第一个基于Flink的批处理和流式处理的应用程序。
第3章 编程模型及核心概念
掌握Flink的核心概念及编程模型,如何在编程中执行key及转换函数,Flink支持的数据类型。
第4章 DataSet API编程
掌握Flink批处理开发的DataSet API的编程,包括数据源、转换函数、Sink、计数器以及分布式缓存的编程。
第5章 DataStream API编程
掌握Flink流处理开发的DataStream API的编程,包括数据源、转换函数、Sink的用法,以及如何自定义数据源和自定义Sink的实现。
第6章 Flink Table API & SQL编程
了解Flink中统一编程模式的编程Table API以及SQL API的开发及使用。
第7章 Flink中的Time及Windows的使用
掌握Flink中三种常用的Time处理方式,掌握Flink中滚动窗口以及滑动窗口的使用,了解Flink中的watermark。
第8章 Flink Connectors
了解Flink中常用的Connector有哪些,了解HDFS Connector的用户,掌握Flink和Kafka对接的Connnector用法。
第9章 Flink部署及作业提交
掌握Flink的local、standalone、yarn模式的部署,如何提交Flink作业进行运行,熟悉Flink中常用的配置参数,掌握Flink cli的用法。
第10章 Flink监控及调优
掌握Flink的常用监控方式以及调优策略。
第11章 基于Flink的互联网直播平台日志分析项目实战
掌握基于Flink的大数据项目的开发流程、处理流程及架构分析,根据需求进行功能的实现,涉及到基于Flink的实时数据清洗、业务统计、可视化展示等流程。
评论0