CDA大数据分析师课程以大数据分析技术为主线,以大数据分析师为培养目标,从数据分析基础、linux操作系统入门知识学起,系统介绍Hadoop、HDFS、MapReduce、Hive和Hbase等理论知识和基于Spark平台的大数据分析和机器学习应用,详细演示Hadoop三种模式的安装配置,以案例的形式,讲解基于PySpark技术的回归、分类和聚类分析等大数据分析场景和案例。课程的重点是培养学员基于Hadoop架构的大数据分析实操能力,从零开始学习hadoop搭建,掌握Spark,手把手带练,8周成为行业急需的大数据分析人才,学完即可满足CDALEVELI大数据分析师考试知识考核需求。讲解案例包括但不限于金融大数据分析、气象大数据分析、Web海量日志大数据分析、智慧高速大数据分析等。
教学安排
Excel数据分析:Excel数据处理技巧和有效方法;Excel数据收集、整合、规范化;Excel公式、函数、数组及数据分析;Excel可视化数据分析(排序、筛选、透视表等);Excel图表化数据呈现
数据库管理:数据库简介;MySQL增删改语句;MySQL select查询语句;MySQL综合案例;SQLserver应用-线上;Oracle应用-线上
Excel BI:Power Query基本功能介绍;Power Query进行数据导入;Power Query横向合并与纵向合并数据;Power Query M函数与数据预处理;Power Pivot数据导入功能;Power Pivot搭建多维数据集与多维数据透视;Power Pivot创建层次结构及KPI;Power Pivot综合应用案例:商机相关企业信息;Power Map数据地图创建及应用方法;Power View交互式仪表板创建方法;案例:全国主要城市空气质量地图、餐饮业店铺销售状况仪表盘
课程目标
掌握使用Hadoop架构应用于大数据分析
掌握使用大数据分析之数据库理论和工具Mysql、Hbase、Hive和Sqoop
掌握使用Spark-SQL进行交互式数据查询
掌握使用Spark-Streaming流式计算框架
掌握使用Spark-MLlib进行机器学习
掌握使用Spark-GraphX进行图计算
掌握使用Pyspark进行大数据分析和机器学习
掌握企业真实的大数据分析场景案例