主題

內(nèi)容見要

海量數(shù)據(jù)處理系統(tǒng)
的實時流式處理架構(gòu)設(shè)計

海量數(shù)據(jù)高并發(fā)實時處理的系統(tǒng)場景

非事務(wù)型的實時流式數(shù)據(jù)

海量數(shù)據(jù)高并發(fā)的實時流式處理數(shù)據(jù)架構(gòu)解決方案

實時流式處理處理的架構(gòu)匯總

高容量，高并發(fā)， 高性能， 高可用，廉價IT投入的非功能性需求實現(xiàn)

8種海量數(shù)據(jù)處理的架構(gòu)設(shè)計與實時流式處理的整合與集成解決方案

分布式系統(tǒng)架構(gòu)的實時流式處理核心設(shè)計

實時流式處理的架構(gòu)分析與框架差異

實時流式計算的應(yīng)用場景及關(guān)鍵技術(shù)

實時流式計算的適用業(yè)務(wù)場景

關(guān)鍵技術(shù)（從系統(tǒng)架構(gòu)，數(shù)據(jù)傳輸，編程接口，高可用，維護成本，其他關(guān)鍵技術(shù)維度闡述）

常見實時流式計算系統(tǒng)簡介（Flink, Spark等）

Flink與Spark Streaming實時流式處理框架差異

優(yōu)缺點分析

實時數(shù)據(jù)標準

數(shù)據(jù)標準化在數(shù)據(jù)治理中的意義

實時數(shù)據(jù)標準定義，標準單詞析取

數(shù)據(jù)標準域，標準用語

數(shù)據(jù)標準管理規(guī)范

數(shù)據(jù)標準建設(shè)模型，過程

服務(wù)總線對數(shù)據(jù)標準的意義

結(jié)合產(chǎn)品實現(xiàn)數(shù)據(jù)標準

數(shù)據(jù)標準在數(shù)據(jù)架構(gòu)中得地位和作用

數(shù)據(jù)質(zhì)量

控制數(shù)據(jù)質(zhì)量的方法

數(shù)據(jù)質(zhì)量管理模型

數(shù)據(jù)知識庫

利用知識庫對數(shù)據(jù)進行清洗，匹配

自動化進行數(shù)據(jù)質(zhì)量控制的方法

數(shù)據(jù)質(zhì)量產(chǎn)品介紹

數(shù)據(jù)質(zhì)量在數(shù)據(jù)架構(gòu)中得實現(xiàn)方法和價值使用場景

數(shù)據(jù)安全

數(shù)據(jù)安全管理范圍

數(shù)據(jù)安全管理流程

數(shù)據(jù)共享策略

數(shù)據(jù)安全技術(shù)架構(gòu)

數(shù)據(jù)安全生命周期管理

數(shù)據(jù)安全產(chǎn)品和數(shù)據(jù)安全方法

數(shù)據(jù)安全在數(shù)據(jù)架構(gòu)中得使用（多租戶、資源隔離等）

數(shù)據(jù)模型

概念模型設(shè)計

邏輯模型設(shè)計

物理模型設(shè)計

數(shù)據(jù)倉庫主題域模型設(shè)計

多維模型設(shè)計

實時數(shù)據(jù)模型

數(shù)據(jù)倉庫分層設(shè)計

數(shù)據(jù)生命周期

數(shù)據(jù)生命周期管理及意義

數(shù)據(jù)生命周期管理體系

識別數(shù)據(jù)分類和相對應(yīng)的生命周期管理

數(shù)據(jù)冷熱溫轉(zhuǎn)化

數(shù)據(jù)價值評分

數(shù)據(jù)生命周期管理對于數(shù)據(jù)架構(gòu)得實際使用場景和方法

元數(shù)據(jù)

元數(shù)據(jù)的定義

元數(shù)據(jù)的使用場景

元數(shù)據(jù)的分類

元數(shù)據(jù)梳理方法

元數(shù)據(jù)管理流程和方法

元數(shù)據(jù)管理內(nèi)容

元數(shù)據(jù)國際標準

元數(shù)據(jù)管理架構(gòu)

元數(shù)據(jù)在數(shù)據(jù)架構(gòu)中地位和使用場景

主數(shù)據(jù)

主數(shù)據(jù)的定義

主數(shù)據(jù)識別方法

主數(shù)據(jù)模型

主數(shù)據(jù)管理規(guī)范

一般主數(shù)據(jù)系統(tǒng)功能和技術(shù)架構(gòu)

主數(shù)據(jù)建設(shè)方法論

主數(shù)據(jù)和其他系統(tǒng)集成方法

主數(shù)據(jù)在數(shù)據(jù)架構(gòu)中得實際使用場景

流批一體化架構(gòu)

flink流批一體的分層架構(gòu)

flink流批一體DataStream

flink流批一體DAG Scheduler

flink流批一體的Shuffle架構(gòu)

flink流批一體的容錯策略

案例

一個典型銀行實時風控大數(shù)據(jù)實時流式處理案例實踐：
具備掌握Flink/Kafka大數(shù)據(jù)實時流式處理/異步消息隊列 應(yīng)用系統(tǒng)的完整 架構(gòu)設(shè)計，
具備項目的分析、開發(fā)、部署的全過程的能力，
貫穿前面課程的主要內(nèi)容，使大家熟悉一個完整實時流式、異步消息隊列處理額大數(shù)據(jù)項目的分析、架構(gòu)設(shè)計、開發(fā)、部署的全過程