?大數(shù)據(jù)運維系統(tǒng)基礎
大數(shù)據(jù)架構概述

1.?大數(shù)據(jù)技術特點
剖析開源、社區(qū)模式、更新快等特點
2.?大數(shù)據(jù)六層架構
介紹大數(shù)據(jù)系統(tǒng)基本架構
3. Hadoop與Spark生態(tài)系統(tǒng)概述以及版本演化
概要介紹Hadoop與Spark生態(tài)系統(tǒng)及其版本演化歷史

大數(shù)據(jù)自動化運維挑戰(zhàn)

1.?大規(guī)模集群
2.?復雜的軟件棧
3.?問題的復雜性（操作系統(tǒng)、網(wǎng)絡、軟件、應用程序及用戶）

大數(shù)據(jù)運維體系

1.?大數(shù)據(jù)運維系統(tǒng)特點
2.?大數(shù)據(jù)運維系統(tǒng)構成
包括自動化部署、自動化配置管理、監(jiān)控、報警、自動審批系統(tǒng)（存儲空間審核、計算資源審核）等

大數(shù)據(jù)運維常用技術棧

1. Linux機器資源監(jiān)控與報警
ganglia與nagios
2.?常用linux命令
top、free、sar、iostat、nmon、jstack、ssh、rsync等
3. Java基礎
JVM、內存管理、GC調優(yōu)
4.?用戶管理
LDAP系統(tǒng)
5.?自動化安裝部署
6. ambari、cloudera manager等

Linux系統(tǒng)基本配置

1.?大數(shù)據(jù)系統(tǒng)對linux要求
2.?大數(shù)據(jù)系統(tǒng)常見linux配置

?數(shù)據(jù)收集與存儲系統(tǒng)運維

分布式數(shù)據(jù)收集系統(tǒng)運維

1. flume與sqoop基本架構與原理
介紹如何使用flume和sqoop兩個系統(tǒng)將外部流式數(shù)據(jù)（比如網(wǎng)站日志，用戶行為數(shù)據(jù)等）、關系型數(shù)據(jù)庫（比如MySQL、Oracle等）中的數(shù)據(jù)導入Hadoop中進行分析和挖掘
2. Flume與sqoop運維

分布式存儲系統(tǒng)運維

1. HDFS?原理、特性與基本架構
2?介紹HDFS原理與架構
3 HDFS運維
4用戶管理
5存儲空間管理（目錄組織方式、份額設置等）
6 HDFS冷熱數(shù)據(jù)分析與優(yōu)化
7 NameNode管理
8?動態(tài)增加新的結點
9?嘗試恢復丟失的數(shù)據(jù)塊
關鍵參數(shù)設置（垃圾桶、GC等）
10 HBase原理與基本架構
11?介紹HBase應用場景、原理和架構
12 HDFS運維
13?表管理
14?常見參數(shù)調優(yōu)

?資源管理系統(tǒng)運維
資源管理系統(tǒng)YARN基礎

1 YARN產(chǎn)生背景及原理
2 YARN基本架構
3 YARN資源調度器
4?以YARN為核心的生態(tài)

資源管理系統(tǒng)YARN運維

1.?參數(shù)配置與調優(yōu)
2.?用戶管理
3.?資源池劃分
4.?資源監(jiān)控

分布式協(xié)調服務Zookeeper

1. Zookeeper產(chǎn)生背景
2. Zookeeper基本架構
3. Zookeeper設計原理
4. Zookeeper安裝部署及運維
5?參數(shù)配置與調優(yōu)

?分布式計算框架運維

分布式計算框架概述

1.?批處理計算框架MapReduce與Spark
2.?交互式分析框架Presto與Impala
3.?流式計算框架Storm與Spark Streaming

分布式計算框架（應用程序）運維

1.?批處理應用監(jiān)控指標
2.交互式框架運維實踐
3.?流式計算框架運維實戰(zhàn)

總結?

大規(guī)模大數(shù)據(jù)集群的運維新挑戰(zhàn)與應對方案

1.大規(guī)模集群新挑戰(zhàn)
2.大規(guī)模集群自動化運維系統(tǒng)