开源力量58期:Hadoop核心系统原理、生态系统介绍和实用场景解析

线上   2014-05-27 20:00 — 22:00

演讲嘉宾

GavinLiu

  嘉宾介绍:阿里大数据高级专家,国内资深的Spark、Hadoop技术专家、虚拟化专家,对HDFS、MapReduce、HBase、Hive、Mahout、Storm、spark和openTSDB等。

会议介绍

随着互联网、移动互联网和物联网的发展,我们已经切实地迎来了一个大数据的时代。大数据处理对于未来的IT开发人员而言,已经成为一项必备的技能,但是要 用好大数据,除了工具本身之外,还包括运维、优化、分布式等方面的知识,形成了全新的挑战,其中对大数据的分析已经成为一个非常重要且紧迫的需求。目前对 大数据的分析工具,首选的是Hadoop平台。Hadoop在可伸缩性、健壮性、计算性能和成本上具有无可替代的优势,事实上已成为当前互联网企业主流的 大数据分析平台。

了解Hadoop在国内的应用场景及Hadoop的未来。掌握Hdoop的分布式文件系统HDFS的原理、Hadoop的分布式计算MapReduce、Hadoop的Key-Value数据库Hbase、Hadoop的Key-Value数据库Hbase、Hadoop的生态系统介绍。

 

【会议议题】

大数据的概念
大数据的”4V”特性
传统海量数据的存储和计算解决方案
Hadoop的发展史
Hadoop的生态系统介绍
Hadoop在国内的应用场景
Hadoop的未来

 

Hdoop的分布式文件系统HDFS的原理
1)HDFS的架构
2)NameNode的功能
3)DataNode的功能
4)SNN的功能
5)HDFS的安全问题


Hadoop的分布式计算MapReduce
1)MapReduce的原理
2)MapReduce的架构
3)MapReduce的Mapper抽象类详解
4)Reducer抽象类详解

 

Hadoop的Key-Value数据库Hbase
1)Hbase的原理
2)Hbase的架构图
3)Hbase的数据模型
4)Hbase的使用场景介绍

 

Hadoop的生态系统介绍
1)FlumeNG介绍
2)Sqoop介绍
3)Hive介绍
4)Pig的介绍
5)Oozie介绍

 

【温馨提示】

本次公开课通过QQ群视频直播。报名后将通过邮件方式告知参课方式和地址,请正确填写邮件地址

 

 

参会人数:
0 0 8

时间地点

  • 时间:2014-05-27 20:00 — 22:00
  • 地点:线上

联系我们

如果想在CSDN会议平台发布会议,请与我们联系: 联系人:刘华 电话:18516031455
邮箱:osf@osforce.cn