hadoop项目实战视频教程结合spark开发电视收视率项目
分类:大数据视频教程-基础与教学实战 文章来源:IT教程屋 编辑作者:晴天
一、hadoop项目实战视频教程结合spark开发电视收视率项目课程导读
1、本套hadoop项目实战视频教程项目是以hadoop为主线进行整个项目的开发,然后结合spark框架做最后的整合调整,实现了hadoop加spark的完美整合开发。
2、本套hadoop项目实战视频教程会通过电视收视率的案例,从零搭建环境、由浅入深的带领童鞋们手把手将整个项目流程做出来,大家只要跟着讲师的思路和步骤一点一点学习和动手写代码,保证能够让大家达到一个大数据工程师该有的水准。
3、该套hadoop项目实战视频教程项目包括视频教程、源码、文档资料,要求童鞋们结合视频加文档的方式进行学习开发。
4、本课程重点考虑项目的整个流程,让大家彻底的深入了解大数据到底应该怎么玩,怎么去运用,整个的项目流程包括数据收集、数据清洗、数据导入Hive、业务分析、数据库之间的导入。
二、hadoop项目实战视频教程结合spark开发电视收视率项目课程大纲
第01节项目的简介 |
第02节项目的背景 |
第03节项目流程演示 |
第04节讲课的内容和对应的知识点 |
第05节php展示统计分析之后的数据 |
第06节大数据架构介绍并且企业使用的测试集群环境和人员配置 |
第08节centos的安装和网络配置 |
第09节通过第三方连接centos的方法 |
第10节CentOS的yum源更新已经关闭防火墙 |
第11节JAVA的安装和hadoop安装 |
第12节完全分布式搭建(上) |
第13节完全分布式搭建(下) |
第14节通过hadoop自带的demo运行单词统计 |
第15节写一个sh脚本,可以通过一台机器控制多台机器 |
第16节hadoop常用的命令简单介绍 |
第17节maven的安装 |
第18节maven的使用时出现的问题以及解决问题方法 |
第19节MAPREDUCE 示例编写及编程规范 |
第20节安装时间同步工具,让所有电脑进行同步 |
第21节Hive简介和工作流程 |
第22节Mysql的安装,centos7安装mysql注意点 |
第23节安装Hive,并且使用Hive做一个小案例 |
第24节把txt文件的数据导入到Hive表中 |
第25节Flume采集系统结构图 |
第26节Flume的安装部署和实战 |
第27节sqoop数据迁移和安装 |
第28节sqoop数据从hadoop里面导入到mysql里面 |
第29节sqoop数据从mysql里面导入到hadoop里面 |
第30节Azkaban介绍和安装 |
第31节Azkaban创建SSL配置和配置文件 |
第32节Azkaban实战通过5个不同场景介绍原理 |
第33节电视采集项目流程篇之通过linux日志收集数据到hdfs上面 |
第34节电视采集项目流程篇之通过MAPREDUCE 把收集数据进行清洗 |
第35节电视采集项目流程篇之清洗数据绑定到hive表中(上) |
第36节电视采集项目流程篇之清洗数据绑定到hive表中(下) |
第37节根据hive绑定数据统计计算保存到hive表中 |
第38节电视采集项目流程篇之把hive表中数据导入到mysql中 |
第39节电视采集项目流程篇之安装php环境并且快速熟悉php语法 |
第40节电视采集项目流程篇之安装php和echarts进行结合展示图表 |
第41节电视采集项目流程篇之Azkaban调度脚本的编写 |
第42节电视采集项目流程篇之Azkaban流程调度演示最终在php页面展示 |
第43节hadoop和hive项目怎么平滑的转到spark上面介绍 |
第44节Spark介绍和整体架构 |
第45节Spark历史和特点 |
第46节Spark下载源码和安装和使用 |
第47节Spark创建RDD集合 |
第48节Spark中transformation的介绍 |
第49节Spark中action的介绍 |
第50节Spark SQL发展史 |
第51节HiveContext |
第52节Spark SQL和DataFrame |
第53节电视采集项目流程如何把hadoop项目平滑过渡到spark项目上 |
第54节电视采集项目流程spark篇通过sparksql处理业务逻辑上 |
第55节电视采集项目流程spark篇通过sparksql处理业务逻辑下 |
第56节电视采集项目流程spark篇通过Azkaban调度spark |
第57节项目总体总结 |
第58节简历指导 |
相关文章 |