会议介绍

课程背景

操作系统：Linux*

课程长度：4天

授课语言：中文

目标学员：课程适合有Linux 使用经验（一年以上）并基本了解开源Hadoop的系统管理员，程序员或者技术带头人。

 

课程描述

本课程为4天，采用课堂讲解的方式，讲授大数据平台组件原理及构架，方法和应用模式和编程课程。课程结束后，学员能够为CRH编程。

 

讲师简介

讲师资质：讲师持有国际认证开发工程师、管理工程师、讲师认证

OpenPower Certified Developer for Apache Hadoop、

OpenPower Certified Hadoop Administrator、

OpenPower Certified Hadoop Developer、

OpenPower Certified Hadoop Instructor。

《大数据技术及应用》

《大数据分析师》

讲师培训经验：讲师培训单位主要开班地点北京、上海、广州、深圳、南京等。客户群有联想、华为、中兴、汇丰银行等。

讲师实战经验：讲师维护集群节点数150+，日增5TB数据，数据量5PB数据量。

讲师实战行业：电信行业：国内某运营商云详单管理系统、NTT-DOCOMO

                        教育行业：广州某教育部云

                        电商行业：联想商城大数据平台

讲师项目职责：各个项目的集群规划、集群搭建，大数据系统搭建，系统架构设计、数据处理、分析、查询等功能实现以及集群性能调优集群维护、权限控制等。

部分讲师著作：《大数据处理与编程技术》

其他优势：主要从事云端大数据架构设计，涉及Openstack,Bigdata（hadoop生态系统）技术融合。企业级开发平台持续集成自动化架构设计，涉及Docker,Kubernetes,Swarm等技术实战，实现企业内部业务架构的自动化和云化。

 

课程时间

11月19日、11月26日、12月3日、12月10日

课程安排

课程	时间	内容
开发工程师	第一天上午	大数据处理的背景 集群系统架构与系统软件 分布式系统概述 Hadoop概述
	第一天下午	Hadoop运行的软硬件环境 Hadoop安装与运行 Hadoop3.0特性
	第二天上午	HDFS的操作与编程 HDFS特点、原理。 HDFS工作机制 HDFS接口
	第二天下午	MapReduce编程 MapReduce原理 MapReduce工作机制 MapReduce编程接口
	第三天上午	Hive的原理 Hive内部表外部表 Hive分区表、分桶表 Hive编程
	第三天下午	HBase介绍 HBase原理 Hbase编程 Phoenix介绍 Phoenix编程
	第四天上午	Storm集群组成 Storm集群原理 Storm topology元素 Storm并行配置 Storm编程思想
	第四天下午	什么是Spark Spark生态和安装部署 Spark编程模型和解析 Spark的编程模型   Spark运行架构和解析