主題

內容見要

海量數(shù)據處理系統(tǒng)
的實時流式處理架構設計

海量數(shù)據高并發(fā)實時處理的系統(tǒng)場景

非事務型的實時流式數(shù)據

海量數(shù)據高并發(fā)的實時流式處理數(shù)據架構解決方案

實時流式處理處理的架構匯總

高容量，高并發(fā)， 高性能， 高可用，廉價IT投入的非功能性需求實現(xiàn)

8種海量數(shù)據處理的架構設計與實時流式處理的整合與集成解決方案

分布式系統(tǒng)架構的實時流式處理核心設計

實時流式處理的架構分析與框架差異

實時流式計算的應用場景及關鍵技術

實時流式計算的適用業(yè)務場景

關鍵技術（從系統(tǒng)架構，數(shù)據傳輸，編程接口，高可用，維護成本，其他關鍵技術維度闡述）

常見實時流式計算系統(tǒng)簡介（Flink, Spark等）

Flink與Spark Streaming實時流式處理框架差異

優(yōu)缺點分析

實時數(shù)據標準

數(shù)據標準化在數(shù)據治理中的意義

實時數(shù)據標準定義，標準單詞析取

數(shù)據標準域，標準用語

數(shù)據標準管理規(guī)范

數(shù)據標準建設模型，過程

服務總線對數(shù)據標準的意義

結合產品實現(xiàn)數(shù)據標準

數(shù)據標準在數(shù)據架構中得地位和作用

數(shù)據質量

控制數(shù)據質量的方法

數(shù)據質量管理模型

數(shù)據知識庫

利用知識庫對數(shù)據進行清洗，匹配

自動化進行數(shù)據質量控制的方法

數(shù)據質量產品介紹

數(shù)據質量在數(shù)據架構中得實現(xiàn)方法和價值使用場景

數(shù)據安全

數(shù)據安全管理范圍

數(shù)據安全管理流程

數(shù)據共享策略

數(shù)據安全技術架構

數(shù)據安全生命周期管理

數(shù)據安全產品和數(shù)據安全方法

數(shù)據安全在數(shù)據架構中得使用（多租戶、資源隔離等）

數(shù)據模型

概念模型設計

邏輯模型設計

物理模型設計

數(shù)據倉庫主題域模型設計

多維模型設計

實時數(shù)據模型

數(shù)據倉庫分層設計

數(shù)據生命周期

數(shù)據生命周期管理及意義

數(shù)據生命周期管理體系

識別數(shù)據分類和相對應的生命周期管理

數(shù)據冷熱溫轉化

數(shù)據價值評分

數(shù)據生命周期管理對于數(shù)據架構得實際使用場景和方法

元數(shù)據

元數(shù)據的定義

元數(shù)據的使用場景

元數(shù)據的分類

元數(shù)據梳理方法

元數(shù)據管理流程和方法

元數(shù)據管理內容

元數(shù)據國際標準

元數(shù)據管理架構

元數(shù)據在數(shù)據架構中地位和使用場景

主數(shù)據

主數(shù)據的定義

主數(shù)據識別方法

主數(shù)據模型

主數(shù)據管理規(guī)范

一般主數(shù)據系統(tǒng)功能和技術架構

主數(shù)據建設方法論

主數(shù)據和其他系統(tǒng)集成方法

主數(shù)據在數(shù)據架構中得實際使用場景

流批一體化架構

flink流批一體的分層架構

flink流批一體DataStream

flink流批一體DAG Scheduler

flink流批一體的Shuffle架構

flink流批一體的容錯策略

案例

一個典型銀行實時風控大數(shù)據實時流式處理案例實踐：
具備掌握Flink/Kafka大數(shù)據實時流式處理/異步消息隊列 應用系統(tǒng)的完整 架構設計，
具備項目的分析、開發(fā)、部署的全過程的能力，
貫穿前面課程的主要內容，使大家熟悉一個完整實時流式、異步消息隊列處理額大數(shù)據項目的分析、架構設計、開發(fā)、部署的全過程