大數據處理技術培訓
大數據處理技術培訓
???
? 培訓目標
1, 全面了解大數據處理技術的相關知識。
2，學習Hadoop的核心技術方法以及應用特征。
3，深入使用Hadoop相關工具在大數據中的使用。?
4，掌握傳統數據中心向云計算中心轉換的關鍵技術。
?
課程大綱
第一講 云計算及大數據處理技術介紹
1）云計算的概念
2）云計算發展現狀
3）大數據的概念
4）大數據的應用
5）大數據關鍵技術
第二講 Google中的關鍵技術
1）GFS文件系統
2）Chubby中的Paxos算法
3）MapReduce技術機制
4）Bigtable表管理技術
第三講 Hadoop文件系統HDFS及其文件結構
1） Hadoop項目簡介
2） HDFS體系結構
3） HDFS關鍵運行機制
4） Hadoop vs Google
5） Hadoop API???
第四講 MapReduce編程模型及其應用開發
1)MapReduce產生背景
2)MapReduce編程模型
3)MapReduce實現機制
4)MapReduce案例分析
第五講 Pig Latin及其使用
1）Pig 設計的目標
2）Pig Latine介紹
3）Pig關鍵性技術
4）Pig的實用案例
第六講 數據倉庫Hive使用
1)Hive設計目標
2)Hive數據模型
3)Hive關鍵性技術
4)Hive的使用案例
第七講 HBase和ZooKeeper使用
1） Hbase運行機制簡介
2） HBase與 HDFS
3） HBase的對外接口
4） ZooKeeper的數據模型
5） ZooKeeper的讀寫機制
6） ZooKeeper的使用方法
第八講 數據抽取工具Sqoop使用
1）數據抽取技術介紹
2）Sqoop中的關鍵技術
3）Sqoop數據抽取策略
4）數據挖掘及分析
第九講 當前數據中心的改造和轉換分析
1）主流商業大數據解決方案比較
2）主流開源云計算系統比較?
3）國內代表性大數據平臺比較?
第十講 各廠商最新的大數據產品介紹
?
?

?

?
?

?

?