
曙海教學(xué)優(yōu)勢(shì)
本課程,秉承二十一年積累的教學(xué)品質(zhì),以項(xiàng)目實(shí)現(xiàn)為導(dǎo)向,面向企事業(yè)項(xiàng)目實(shí)際需要,老師將會(huì)與您分享設(shè)計(jì)的全流程以及工具的綜合使用經(jīng)驗(yàn)、技巧。課程可定制,線上/線下/上門皆可,熱線:4008699035。
曙海培訓(xùn)的課程培養(yǎng)了大批受企業(yè)歡迎的工程師。大批企業(yè)和曙海
建立了良好的合作關(guān)系,20多年來(lái),合作企事業(yè)單位以達(dá)30多萬(wàn)。曙海培訓(xùn)的課程在業(yè)內(nèi)有著響亮的知名度。
大數(shù)據(jù)培訓(xùn)課程1
?
課程目標(biāo):
?
通過(guò)該課程的學(xué)習(xí),能夠?qū)?/font>大數(shù)據(jù)技術(shù)基礎(chǔ)、Hadoop、HBase、Hive、Spark、Flink、Kafka、Flume原理及使用有深入的了解,對(duì)企業(yè)數(shù)據(jù)平臺(tái)建設(shè)、開(kāi)發(fā)、運(yùn)維以及集群的穩(wěn)定運(yùn)行有很大的幫助。
?
課程大綱:
?
|
主題 |
內(nèi)容 |
|
? ? ? ? ? 大數(shù)據(jù)技術(shù)基礎(chǔ)&分布式文件系統(tǒng)&分布式資源調(diào)度系統(tǒng) |
大數(shù)據(jù)背景知識(shí)、發(fā)展歷程介紹 大數(shù)據(jù)平臺(tái)架構(gòu)層次設(shè)計(jì) HDFS核心概念、應(yīng)用場(chǎng)景介紹以及體系結(jié)構(gòu)詳解 HDFS高可用的原理介紹,共享存儲(chǔ)、active/standby詳解 HDFS常用命令實(shí)戰(zhàn)演示,數(shù)據(jù)文件、數(shù)據(jù)塊監(jiān)控介紹 NameNode核心元數(shù)據(jù)fsimage/editlog原理介紹 DataNode職責(zé)介紹、數(shù)據(jù)塊物理存儲(chǔ)結(jié)構(gòu)介紹 YARN體系結(jié)構(gòu)詳解 ResourceManager原理解析 NodeManager原理解析 容量調(diào)度器和公平調(diào)度器詳解 資源兩階段申請(qǐng)?jiān)敿?xì)流程詳細(xì) MapReduce代碼實(shí)例演示 |
|
? ? ? ? ? Hive&Spark&Flink 計(jì)算引擎 |
Hive 數(shù)據(jù)庫(kù)/表/分區(qū)實(shí)戰(zhàn) Hive元數(shù)據(jù)庫(kù)介紹、演示 HIve高級(jí)函數(shù)實(shí)戰(zhàn) Spark體系結(jié)構(gòu)原理解析 Spark常用算子程序演示 Spark On YARN運(yùn)行實(shí)踐 Flink應(yīng)用場(chǎng)景介紹,與Spark區(qū)別詳解 Flink Standalone和ON YARN運(yùn)行模式與區(qū)別詳解 Flink常用算子實(shí)戰(zhàn) Kafka+Flink代碼實(shí)戰(zhàn)演示 Flink精確一次性語(yǔ)義原理介紹 Flink Checkpoint應(yīng)用長(zhǎng)以及原理介紹 |
|
? ? ? HBase體系結(jié)構(gòu)與工作原理 |
HBase多模生態(tài)介紹 HBase體系結(jié)構(gòu)詳解 HBase高并發(fā)原理、讀寫(xiě)流程詳解 HBase數(shù)據(jù)模型詳解、實(shí)戰(zhàn)演示 HBase元數(shù)據(jù)存儲(chǔ)詳解 HBase讀寫(xiě)表/過(guò)濾器/計(jì)數(shù)器代碼實(shí)戰(zhàn) HBase數(shù)據(jù)熱點(diǎn)產(chǎn)生原因以及預(yù)分區(qū)實(shí)戰(zhàn) |
|
? ? ? Flume/Kafka原理以及使用 ? |
Flume+Kafka在企業(yè)數(shù)據(jù)平臺(tái)的應(yīng)用場(chǎng)景 Flume高可用體系結(jié)構(gòu)原理介紹 Flume Source/Channel/Sink組件詳解、實(shí)戰(zhàn) Flume高可用采集系統(tǒng)設(shè)計(jì) Kafka體系結(jié)構(gòu)原理介紹 Kafka生產(chǎn)者、消費(fèi)者代碼實(shí)戰(zhàn)演示 Kafka消費(fèi)者組、TOPIC、分區(qū)、偏移量offset關(guān)系剖析 |
?
?
?