获取资料

实时仓库+离线仓库 尚硅谷基于腾讯云EMR搭建实时数据仓库

实时仓库+离线仓库 尚硅谷基于腾讯云EMR搭建实时数据仓库

===============课程介绍===============

在当今数据驱动的世界中,数据处理的速度和质量至关重要。为了满足不断增长的数据需求,企业需要创新性地构建数据仓库,以便实时和离线数据分析。这门课程旨在为您提供全面的知识和实际技能,以在腾讯云EMR平台上构建创新的数据仓库解决方案。

===============课程亮点===============

深入理解实时与离线数据处理的概念,以满足不同业务需求。

掌握腾讯云EMR平台的核心功能,以构建可伸缩的数据仓库。

学习如何处理大规模数据集,从而实现高效的数据分析和洞察。

实战经验:通过实际项目和案例研究,将理论知识付诸实践。

与尚硅谷领域专家互动:获得实时指导和支持,以解决挑战和提升技能。

===============课程目录===============

(1)\基于腾讯云EMR搭建实时数据仓库

代码.zip

笔记.zip

资料.zip

(2)\基于腾讯云EMR搭建离线数据仓库

代码.zip

笔记.zip

资料.zip

(3)\基于腾讯云EMR搭建实时数据仓库\视频

001-腾讯云EMR-实时数仓-课程介绍.mp4

002-简介.mp4

003-课程目标.mp4

004-数据仓库概念.mp4

005-项目需求.mp4

006-技术选型.mp4

007-数据流程设计.mp4

008-框架的版本选型.mp4

009-服务器选型.mp4

010-集群规模及集群规划.mp4

011-电商业务简介.mp4

012-EMR的购买与启动.mp4

013-EMR集群简单说明.mp4

014-使用XShell连接服务.mp4

015-修改主机映射&配置无密登录.mp4

016-电商业务数据说明.mp4

017-上传资料包.mp4

018-MySQL的安装与启动.mp4

019-MySQL修改密码&远程访问.mp4

020-生成业务数据.mp4

021-Kafka安装.mp4

022-Kafka配置环境变量&群起.mp4

023-同步策略&开启MySQL Binlog.mp4

024-Flink安装.mp4

025-项目构建.mp4

026-FlinkCDC代码讲解&本地测试.mp4

027-FlinkCDC代码远程测试.mp4

028-课程介绍.mp4

029-分层框架-ODS&DIM层.mp4

030-DWD&DWS&ADS层.mp4

031-架构分析.mp4

032-准备工作.mp4

033-具体工作.mp4

034-HBase部署.mp4

035-HBase启动&测试.mp4

036-IDEA代码环境说明.mp4

037-Phoenix部署.mp4

038-Phoenix启动.mp4

039-Redis部署.mp4

040-Redis启动&测试.mp4

041-ClickHouse安装&启动&测试.mp4

042-课程说明.mp4

043-DIM层-思路分析 1.mp4

044-DIM层-思路分析 2.mp4

045-DIM层-思路分析 3.mp4

046-DIM层-思路整理.mp4

047-DIM层-消费&过滤&转换数据.mp4

048-DIM层-配置信息表.mp4

049-DIM层-读取配置信息&处理成广播流.mp4

050-DIM层-处理连接流-思路分析.mp4

051-DIM层-处理连接流-广播流-解析数据.mp4

052-DIM层-处理连接流-广播流-校验并建表.mp4

053-DIM层-处理连接流-广播流-写入状态.mp4

054-DIM层-处理连接流-主流-读取状态&过滤数据.mp4

055-DIM层-处理连接流-主流-补充字段并写出数据.mp4

056-DIM层-将数据写出到Phoenix-编码.mp4

057-DIM层-将数据写出到Phoenix-测试.mp4

058-DIM层-将数据写出到Phoenix-打包上传集群.mp4

059-DWD层-用户域用户注册代码讲解.mp4

060-DWD层-前置知识-WindowJOIN-说明.mp4

061-DWD层-前置知识-IntervalJOIN-说明.mp4

062-DWD层-前置知识-IntervalJOIN-编码.mp4

063-DWD层-前置知识-IntervalJOIN-测试.mp4

064-DWD层-交易域加购事实表.mp4

065-DWD层-工具域领券事实表.mp4

066-DWD层-互动域评价事实表.mp4

067-DWD层-交易域订单事实表.mp4

068-DWS层-整体介绍.mp4

069-DWS层-用户域用户注册基础代码.mp4

070-DWS层-ClickHouse工具类 1.mp4

071-DWS层-ClickHouse工具类 2.mp4

072-DWS层-ClickHouse工具类 3.mp4

073-DWS层-交易域加购需求基础代码.mp4

074-DWS层-交易域SKU粒度下单需求前置说明.mp4

075-需求分析 1.mp4

076-需求分析 2.mp4

077-思路整理.mp4

078-JavaBean封装.mp4

079-读取&转换&过滤&分组数据.mp4

080-left join重复数据去重.mp4

081-分组&开窗&聚合.mp4

082-中间测试.mp4

083-关联维表说明.mp4

084-JDBCUtil封装 1.mp4

085-JDBCUtil封装 2.mp4

086-JDBCUtil测试&再封装.mp4

087-关联维表-优化的必要性.mp4

088-关联维表-旁路缓存-说明.mp4

089-关联维表-旁路缓存-读写编码.mp4

090-关联维表-旁路缓存-读写测试.mp4

091-关联维表-旁路缓存-删除缓存数据.mp4

092-关联维表-旁路缓存-删除缓存数据 测试.mp4

093-关联维表-异步IO-说明.mp4

094-关联维表-异步IO-API说明.mp4

095-关联维表-异步IO-线程池工具类.mp4

096-关联维表-异步IO-异步函数 1.mp4

097-关联维表-异步IO-异步函数 2.mp4

098-关联维表-异步IO-异步函数 3.mp4

099-关联维表-异步IO-异步函数 4.mp4

100-完整测试.mp4

101-关联维表-测试准备工作.mp4

102-关联维表-测试完成.mp4

103-关联其他维表&写出数据.mp4

104-可视化展示-课程介绍.mp4

105-可视化展示-任务介绍.mp4

106-可视化展示-Sugar基本介绍.mp4

107-可视化展示-Web项目基本说明.mp4

108-可视化展示-构建SpringBoot Web模块.mp4

109-可视化展示-初体验SpringBoot Web模块.mp4

110-可视化展示-再体验SpringBoot Web模块.mp4

111-可视化展示-GMV需求-Mapper完成.mp4

112-可视化展示-GMV需求-Service完成.mp4

113-可视化展示-GMV需求-Controllrt完成.mp4

114-可视化展示-GMV需求-接口测试完成.mp4

115-可视化展示-GMV需求-对接Sugar测试完成.mp4

(4)\尚硅谷基于腾讯云EMR搭建离线数据仓库

001-课程介绍.mp4

002-采集模块介绍.mp4

003-课程目标.mp4

004-数据仓库概念.mp4

005-项目需求.mp4

006-技术选型.mp4

007-数据流程设计.mp4

008-框架版本选型.mp4

009-服务器选型.mp4

010-集群规模&规划.mp4

011-电商业务简介.mp4

012-选购EMR集群.mp4

013-远程连接.mp4

014-修改主机名.mp4

015-配置主机映射.mp4

016-配置免密登录.mp4

017-电商业务数据分析.mp4

018-上传资料包.mp4

019-MySQL安装与启动.mp4

020-远程连接MySQL&建库建表.mp4

021-业务数据生成.mp4

022-Kafka服务安装.mp4

023-Kafka服务群起&测试.mp4

024-Flume&同步策略和工具概述.mp4

025-开启MySQL Binlog 配置信息.mp4

026-开启MySQL Binlog 测试.mp4

027-使用Sqoop完成全量数据同步.mp4

028-增量数据同步数据通道.mp4

029-Flink部署.mp4

030-FlinkCDC简单代码说明.mp4

031-FlinkCDC简单代码本地测试.mp4

032-FlinkCDC完整代码说明.mp4

033-FlinkCDC完整代码打包测试.mp4

034-Flume配置文件.mp4

035-增量数据同步测试.mp4

036-Flume脚本完成.mp4

037-构建离线数仓文档说明.mp4

038-数据仓库概述.mp4

039-建模准备工作.mp4

040-建模具体工作.mp4

041-Hive环境准备-修改配置.mp4

042-Hive环境准备-测试.mp4

043-Yarn环境准备.mp4

044-开发环境准备说明.mp4

045-ODS层-建表.mp4

046-ODS层-装载数据.mp4

047-DIM层-商品维度表.mp4

048-DIM层-优惠券维度表.mp4

049-DIM层-活动维度表.mp4

050-DIM层-地区维度表.mp4

051-DIM层-用户维度表.mp4

052-DWD层-加购事实表.mp4

053-DWD层-下单事实表.mp4

054-DWD层-取消订单事实表.mp4

055-DWD层-其他事实表&脚本封装.mp4

056-DWD层-数据展示.mp4

057-DWS层-交易域用户商品粒度订单需求-需求分析.mp4

058-DWS层-交易域用户商品粒度订单需求-建表&装载数据.mp4

059-DWS层-交易域用户商品粒度退单需求-建表&装载数据.mp4

060-ADS层-品牌订单统计.mp4

061-ADS层-交易综合统计.mp4

062-数据可视化-建表&导出数据.mp4

063-数据可视化-最终总结.mp4

评论0

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址