| 大數(shù)據(jù)內(nèi)存計(jì)算技術(shù)介紹(深入理解Spark Core實(shí)現(xiàn)原理) |
1、Spark應(yīng)用現(xiàn)狀
2、Spark應(yīng)用優(yōu)勢(shì)
3、Spark應(yīng)用案例
4、Scala介紹
5、Mesos介紹
6、Spark介紹
7、Spark基本概念介紹
8、Spark架構(gòu)剖析
9、Spark RDD計(jì)算模型解析
10、Spark RDD操作剖析
11、DAG有向無(wú)環(huán)圖介紹
12、Spark編程
a)Java編寫Spark程序
b)Scala編寫Spark程序
c)Python編寫Spark程序
d)R編寫Spark程序
13、Spark可訪問(wèn)的數(shù)據(jù)源介紹
a)文件系統(tǒng)
b)HDFS
c)HBase
d)Hive
e)Cassandra
f)Tachyon
14、Spark編程技巧分享
15、Spark開發(fā)分析
16、Spark的執(zhí)行機(jī)制解析
17、Spark運(yùn)行原理剖析
18、Spark的調(diào)試與任務(wù)分配
19、Spark的性能調(diào)優(yōu)
20、Spark與MapReduce對(duì)比分析
21、Spark生態(tài)體系剖析
22、Spark監(jiān)控管理
23、Spark的容錯(cuò)機(jī)制剖析
24、Spark集群部署
25、Spark集群部署經(jīng)驗(yàn)分享
26、Spark大規(guī)模集群運(yùn)維經(jīng)驗(yàn)分享
27、 Spark實(shí)戰(zhàn)案例:Spark與HBase整合分析數(shù)據(jù) |
| 大數(shù)據(jù)內(nèi)存計(jì)算技術(shù)實(shí)戰(zhàn)分享(深入理解Spark Core使用實(shí)戰(zhàn)操作) |
1、Spark Shell
2、PySpark
3、構(gòu)建與運(yùn)行Spark應(yīng)用
4、Spark的性能調(diào)優(yōu)
5、Spark實(shí)戰(zhàn)案例:預(yù)測(cè)國(guó)際經(jīng)濟(jì)危機(jī)實(shí)戰(zhàn)案例開發(fā) |
| Shark數(shù)據(jù)倉(cāng)庫(kù)工具實(shí)戰(zhàn)(深入理解Shark實(shí)現(xiàn)原理及開發(fā)實(shí)戰(zhàn)) |
1、Spark Shark概述
2、Hive與Shark
3、Spark Shark原理剖析
4、Spark Shark框架介紹
5、Spark Shark編程
6、Spark Shark分布式文件HDFS讀寫
7、Spark Shark APIs全面介紹
8、Shark UDFs
9、Shark UADFs
10、Shark HiveQL
11、Shark基于Spark的綜合應(yīng)用
12、Spark Shark實(shí)戰(zhàn)案例:運(yùn)營(yíng)商話務(wù)數(shù)據(jù)分析案例剖析 |
| Spark SQL技術(shù)實(shí)戰(zhàn)(深入理解Spark SQL實(shí)現(xiàn)原理及開發(fā)實(shí)戰(zhàn)) |
1、Spark SQL概述
2、Spark SQL原理剖析
3、Spark SQL架構(gòu)介紹
4、SparkSQL CLI
5、Tree和Rule
6、sqlContext和hiveContext的運(yùn)行過(guò)程
7、Load/Save函數(shù)
8、Parquet文件讀寫
9、Spark SQL連接JDBC
10、Spark SQL連接ODBC
11、Spark SQL分布式文件HDFS讀寫
12、JSON數(shù)據(jù)集
13、Hive表
14、數(shù)據(jù)類型
15、Spark SQL與 Cassandra集成
16、Spark SQL APIs全面介紹
17、Spark SQL and DataFrames
18、Spark SQL and DataSets
19、Spark SQL HiveQL
20、Spark SQL編程
21、運(yùn)行Spark SQL程序
22、在內(nèi)存中緩存數(shù)據(jù)
23、Spark SQL UDFs
24、Spark SQL UADFs
25、Spark SQL SerDes
26、Spark SQL BI Tools
27、Spark SQL實(shí)戰(zhàn)案例:數(shù)據(jù)分析案例剖析
?
|
| Spark Streaming流計(jì)算技術(shù)實(shí)戰(zhàn)(深入理解Spark Streaming實(shí)現(xiàn)原理及開發(fā)實(shí)戰(zhàn)) |
1、Spark Streaming概述
2、Spark Streaming原理剖析
3、Spark Streaming流數(shù)據(jù)處理框架介紹
4、Spark Streaming編程剖析
5、初始化StreamingContext
6、Discretized Streams (DStreams)
7、輸入DStreams與Receivers
8、基于DStreams的Transformations
9、基于DStreams的輸出操作
10、Accumulators和Broadcast Variables
11、DataFrame和SQL操作
12、MLlib操作
13、Caching與Persistence
14、Checkpointing
15、運(yùn)行Spark Streaming程序
16、性能調(diào)優(yōu):減少批處理時(shí)間
17、性能調(diào)優(yōu):設(shè)置正確的批處理間隔時(shí)間
18、內(nèi)存調(diào)優(yōu)
19、容錯(cuò)元語(yǔ)
實(shí)戰(zhàn)案例:Spark Streaming與Kafka整合實(shí)現(xiàn)數(shù)據(jù)實(shí)時(shí)數(shù)據(jù)分析處理設(shè)計(jì)與分析 |
| Spark GraphX圖計(jì)算框架實(shí)戰(zhàn)(深入理解Spark GraphX實(shí)現(xiàn)原理及開發(fā)實(shí)戰(zhàn)) |
1、Spark GraphX概述
2、Spark GraphX圖計(jì)算理論剖析
3、Spark GraphX框架剖析
4、Spark GraphX的圖屬性
5、Spark GraphX的圖操作
6、操作列表
7、屬性操作
8、結(jié)構(gòu)操作
9、連接操作
10、近鄰集合操作
11、Caching and Uncaching
12、Pregel APIs
13、Graph Builders
14、Vertex與Edge RDDs
15、Optimized Representation
16、Graph Algorithms
17、PageRank
18、Connected Components
19、Triangle Counting
20、Spark GraphX編程剖析
21、Spark GraphX APIs介紹
22、實(shí)戰(zhàn)案例:Spark GraphX實(shí)現(xiàn)社交網(wǎng)絡(luò)關(guān)系分析 |
| spark MLlib機(jī)器學(xué)習(xí)庫(kù)實(shí)戰(zhàn)(深入理解Spark MLlib實(shí)現(xiàn)原理及開發(fā)實(shí)戰(zhàn)) |
- Spark MLlib概述
- Spark MLlib算法庫(kù)介紹
- Spark MLlib架構(gòu)剖析
- Spark MLlib機(jī)器學(xué)習(xí)算法剖析
- 數(shù)據(jù)類型
- 基本統(tǒng)計(jì)算法
- 分類與回歸
- 協(xié)同過(guò)濾
- 聚類
- 降維
- 特征提取與轉(zhuǎn)換
- 頻繁模式挖掘
- 評(píng)價(jià)指標(biāo)
- Spark MLlib編程
- Spark MLlib APIs介紹
- Spark MLlib機(jī)器學(xué)習(xí)算法應(yīng)用實(shí)戰(zhàn)
- Spark MLlib實(shí)戰(zhàn)案例:數(shù)據(jù)聚類分析案例剖析
|
| Spark集成R語(yǔ)言SparkR(R語(yǔ)言與大數(shù)據(jù)內(nèi)存計(jì)算框架Spark集成) |
- R語(yǔ)言概述
- R語(yǔ)言語(yǔ)法介紹
- R語(yǔ)言繪圖函數(shù)
- R語(yǔ)言高級(jí)繪圖函數(shù)
- SparkR集群部署
- SparkR原理剖析
- SparkR框架介紹
- SparkR DataFrames
- DataFrame的操作
- 選擇行和列
- Grouping和Aggregation
- SparkContext和SQLContext
- 在SparkR中運(yùn)行SQL查詢
- SparkR編程
- 在YARN上SparkR運(yùn)行
- SparkR機(jī)器學(xué)習(xí)
- SparkR實(shí)戰(zhàn)案例:運(yùn)營(yíng)商話務(wù)數(shù)據(jù)繪圖
|
| 大數(shù)據(jù)推薦實(shí)戰(zhàn)(深入理解大數(shù)據(jù)推薦技術(shù)以及推薦技術(shù)編程) |
1、個(gè)性化推薦的理論依據(jù)
2、個(gè)性化推薦的價(jià)值
3、個(gè)性化推薦能達(dá)到的目的
4、個(gè)性化推薦的原則
5、個(gè)性化推薦技術(shù)發(fā)展史
6、個(gè)性化推薦的相關(guān)技術(shù)
7、基于用戶的常用推薦算法
8、基于用戶的協(xié)同過(guò)濾推薦 |