Greenplum Hadoop分布式平臺大數據解決方案實戰教程

基于Greenplum Hadoop分布式平臺的大數據解決方案及商業應用案例剖析

【上集】百度網盤下載：鏈接：http://pan.baidu.com/s/1eQJFXZ0 密碼：kdx9

【下集】百度網盤下載：鏈接：http://pan.baidu.com/s/1hq4cO2w 密碼：cnsq

課程內容簡介：

本課程分兩大部分：

    第一部分全面深入地介紹了Greenplum數據庫，包括架構特性、部署、管理、開發和調優等，由淺入深

，理論結合實戰，讓同學全面徹底掌握這把大數據利劍。

    第二部分深入闡述了Hadoop的架構原理，Hadoop整體技術架構，包括HBase、Hive、Pig、ZooKeeper、

Chukwa等實戰運用。另外還介紹了云計算的基礎知識和Hadoop在云計算領域的運用，以及剖析了Hadoop在

各個互聯網巨頭商業環境的運用。

【上集】 Greenplum 分布式數據庫基礎（41課時）

         1 Greenplum架構

            什么是Greenplum

            Greenplum體系結構

            Greenplum高可用性架構

         2 安裝Greenplum

            配置環境

            安裝并初始化GPDB系統

            啟停數據庫

            配置GP系統

         3 分布式數據庫存儲

            數據是如何存儲的

            分布策略

         4 GBDB查詢處理

            查詢命令的執行

            SQL查詢處理機制

            并行查詢計劃

         5 角色權限及客戶端認證管理

            客戶端認證

            管理用戶和組

         6 客戶端接口和程序

            pgAdmin III

            PSQL

         7 定義數據庫對象

            創建并管理數據庫

            創建并管理表空間

            創建并管理模式

            創建并管理表

            分區表

            數據分布與分區

            壓縮存儲與行列存儲

            序列、索引與視圖

         8 管理數據

            插入、更新、刪除記錄

            事務管理

            空間回收和統計

         9 查詢數據

            定義查詢

            使用函數和運算符

            查詢分析

         10 工作負載及資源管理

            GP工作負載管理概述

            配置工作負載管理

            創建資源隊列

            分配資源隊列

            檢查資源隊列狀態

         11 裝載和卸載數據

            GP裝載命令概述

            裝載數據到GP

            從GP卸載數據

            格式化數據文件

         12 備份恢復

            串行備份和恢復

            并行恢復和恢復

         13 性能調優

            如何進行調優

            常見的性能問題

         14 GP系統配置參數

            關于GP的Master參數與本地化參數

            設置配置參數

            配置參數種類

         15 開啟高可用性

            GP高可用概述

            開啟GP的Mirror

            獲知Segment何時失敗

            恢復失敗的Segment

            恢復失敗的Master

         16 GP MapReduce

            MapReduce基礎

            GP MapReduce編程

            MapReduce作業執行和故障診斷

【下集】 Hadoop分布式平臺（55課時）

         1 Hadoop的起源和體系

            Hadoop思想起源：Google

            Hadoop子項目家族

            Hadoop的架構

         2 Hadoop的安裝與配置

            準備和配置環境

            三種運行模式

            完全分布式模式安裝

         3 HDFS-大數據存儲

            HDFS概念與體系結構

            HDFS的可靠性

            HDFS文件操作

            HDFS API

         4 關于MapReduce

            MapReduce編程模型

            MapReduce的集群行為

            MapReduce任務的優化

            MapReduce工作機制

            錯誤處理及作業調度機制

         5 MapReduce應用開發

            Hadoop Eclipse插件開發

            數據篩選程序開發

            倒排索引程序開發

         6 Hadoop監控與管理

            頁面監控

            hadoop備份

         7 HBase數據庫

            Hbase體系結構

            HBase shell

            HBase API應用實例

            HBase場景應用

            HBase模式設計

         8 Hive數據倉庫

            Hive組件與體系架構

            Hive安裝配置

            Hive的服務接口

            HiveQL常用操作

            Hive的優化

            Hive UDF編程

            Hive綜合實戰

         9 Pig數據分析平臺

            Pig框架

            Pig安裝配置

            Pig的使用

            Pig的數據模型

            常用Pig Latin操作

            Pig UDF編程

            Pig數據分析實戰

         10 ZooKeeper分布式服務框架

            ZooKeeper工作原理

            ZooKeeper設計目標

            ZooKeeper的數據結構和組成

            ZooKeeper的安裝配置

            ZooKeeper命令行工具

            ZooKeeper API

            ZooKeeper實戰：Hadoop任務調度

         11 Chukwa集群監控系統

            Chukwa的組成

            Chukwa架構和設計

            Chukwa安裝與配置

            常用Chukwa命令

            實現自定義數據處理

         12 Hadoop商業應用案例

            云計算概念和特征

            云計算服務模式和形態

            Hadoop在云計算的運用

            京東商城

            百度

            阿里巴巴

            騰訊

         13 Greenplum Hadoop集群

            集成架構的特征

            集成架構的優勢

            配置gphdfs協議使用環境

            使用HDFS外部表