數(shù)據(jù)管理及數(shù)倉(cāng)建模

=============================================================
《數(shù)據(jù)管理及數(shù)倉(cāng)建?！?-段方
某世界 100 強(qiáng)企業(yè)大數(shù)據(jù)/AI 總設(shè)計(jì)師 教授 北京大學(xué)博士后
=============================================================
13465791461 概述
-------------------------------------------------------------
1.1 企業(yè)的數(shù)字化轉(zhuǎn)型
1.2 數(shù)字化轉(zhuǎn)型的核心——大數(shù)據(jù)
1.3 數(shù)據(jù)倉(cāng)庫(kù)基礎(chǔ)
1.4 數(shù)據(jù)湖概念和架構(gòu)
1.5 大數(shù)據(jù)的核心——數(shù)據(jù)建模
1.6 數(shù)據(jù)建模概覽
1.7 如何表述數(shù)據(jù)之間的關(guān)系？
1.8 數(shù)據(jù)管理的相關(guān)規(guī)范
1.8.1 數(shù)據(jù)標(biāo)準(zhǔn)
1.8.2 業(yè)務(wù)標(biāo)準(zhǔn)
1.8.3 管理標(biāo)準(zhǔn)
1.9 【例】附件——某企業(yè)數(shù)據(jù)治理案例介紹
2 數(shù)據(jù)建模的技術(shù)、流程和注意點(diǎn)
2.1 什么是數(shù)據(jù)模型？
2.2 數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)模型
2.3 大數(shù)據(jù)系統(tǒng)不用數(shù)據(jù)模型嗎？
2.4 數(shù)據(jù)建模的基礎(chǔ)——第三范式
2.5 數(shù)據(jù)建模的流程
2.6 數(shù)據(jù)模型是數(shù)據(jù)治理的基礎(chǔ)
2.7 數(shù)據(jù)接口的標(biāo)準(zhǔn)是數(shù)據(jù)模型的基礎(chǔ)
2.8 數(shù)據(jù)字典概念基礎(chǔ)
2.9 數(shù)據(jù)建模的關(guān)鍵點(diǎn)
2.10 【例】附件——某企業(yè)數(shù)據(jù)字典舉例
3 數(shù)據(jù)整合、處理和展示
3.1 數(shù)據(jù)內(nèi)容
3.1.1
3.1.2
3.1.3
3.1.4
3.1.5
客戶數(shù)據(jù) 產(chǎn)品數(shù)據(jù) 營(yíng)銷數(shù)據(jù) 員工數(shù)據(jù) 服務(wù)數(shù)據(jù)
3.2 數(shù)據(jù)標(biāo)準(zhǔn)的顆粒度
3.2.1 詳細(xì)數(shù)據(jù)
3.2.2 匯總數(shù)據(jù)
3.2.3 衍生數(shù)據(jù)
3.3 數(shù)據(jù)如何收集
3.3.1 從內(nèi)部各個(gè) IT 系統(tǒng)獲取
3.3.2 外部數(shù)據(jù)獲取方法
3.3.3 批量獲取/實(shí)時(shí)獲取
3.4 數(shù)據(jù)清洗過(guò)程
3.4.1 數(shù)據(jù)抽取
3.4.2 數(shù)據(jù)轉(zhuǎn)換
3.4.3 數(shù)據(jù)加載
3.5 跨平臺(tái)數(shù)據(jù)接口標(biāo)準(zhǔn)
3.5.1 數(shù)據(jù)接口的定義
3.5.2 數(shù)據(jù)接口的管理職責(zé)
3.5.3 接口設(shè)計(jì)的原則
3.6 邏輯模型設(shè)計(jì)及實(shí)例
3.6.1 原因
3.6.2 邏輯模型設(shè)計(jì)的原則
3.6.3 設(shè)計(jì)實(shí)例
3.7 物理模型設(shè)計(jì)及實(shí)例
3.7.1 原因
3.7.2 物理模型設(shè)計(jì)原則
3.7.3 設(shè)計(jì)實(shí)例
3.8 數(shù)據(jù)字典及實(shí)例
3.8.1
3.8.2
3.8.3
概念
范圍和內(nèi)容 設(shè)計(jì)實(shí)例
3.9 【案例】附件-某企業(yè)的數(shù)據(jù)資產(chǎn)治理案例
1935291166714 數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)湖技術(shù)及案例
-------------------------------------------------------------
4.1 數(shù)據(jù)倉(cāng)庫(kù)的引出
4.2 數(shù)據(jù)倉(cāng)庫(kù)的流派之爭(zhēng)
4.3 非結(jié)構(gòu)化數(shù)據(jù)帶來(lái)的挑戰(zhàn)
4.4 從數(shù)據(jù)倉(cāng)庫(kù)到數(shù)據(jù)湖
4.5 數(shù)據(jù)倉(cāng)庫(kù)底層技術(shù)的演進(jìn)
4.6 數(shù)據(jù)湖的底層技術(shù)變化
4.7 某企業(yè)的數(shù)據(jù)建模舉例
4.8 【案例】附件-某企業(yè)數(shù)據(jù)倉(cāng)庫(kù)/數(shù)據(jù)湖案例
1935291167325 建模方法論
-------------------------------------------------------------
5.1 數(shù)據(jù)模型基本方法
5.2 數(shù)據(jù)模型與行業(yè)應(yīng)用的關(guān)系
5.3 第三范式
5.4 實(shí)體-關(guān)系模型
5.5 建模的三階段
5.5.1 概念模型
5.5.2 邏輯模型
5.5.3 物理模型
5.6 建立模型的關(guān)鍵問(wèn)題
5.6.1 邏輯模型與業(yè)務(wù)的關(guān)系
5.6.2 邏輯模型與需求的關(guān)系
5.6.3 邏輯模型與業(yè)務(wù)系統(tǒng)的關(guān)系
5.7 【例】附件——某企業(yè)數(shù)據(jù)倉(cāng)庫(kù)建模舉例
6 建模工具
6.1 Erwin 建模工具介紹
6.2 主要特點(diǎn)
6.3 主要功能
6.4 Erwin 支持的各種接口
6.5 【例】附件——Erwin 工具介紹
7 數(shù)據(jù)倉(cāng)庫(kù)邏輯模型（示例）
7.1 數(shù)據(jù)倉(cāng)庫(kù)模型概述
7.2 某企業(yè)數(shù)據(jù)模型概述及舉例
7.3 參與人主題域
7.4 服務(wù)主題域
7.5 資源主題域
7.6 營(yíng)銷主題域
7.7 事件主題域
7.8 賬務(wù)主題域
7.9 財(cái)務(wù)主題域
7.10 【例】附件——某企業(yè)的數(shù)據(jù)倉(cāng)庫(kù)建模舉例
134651166838 匯總層數(shù)據(jù)模型
-------------------------------------------------------------
8.1 什么是匯總層數(shù)據(jù)模型？
8.2 某企業(yè)匯總層數(shù)據(jù)模型及案例
8.3 詳單匯總
8.4 賬務(wù)匯總
8.5 個(gè)人用戶匯總
8.6 集團(tuán)客戶匯總
8.7 產(chǎn)品信息匯總等
8.8 【例】附件——某企業(yè)的數(shù)據(jù)質(zhì)量管理介紹
134651150149 數(shù)據(jù)接口設(shè)計(jì)
-------------------------------------------------------------
9.1 數(shù)據(jù)接口設(shè)計(jì)要求
9.2 數(shù)據(jù)接口分類
9.3 數(shù)據(jù)接口實(shí)現(xiàn)機(jī)制
9.4 接口雙方職責(zé)
9.5 數(shù)據(jù)轉(zhuǎn)換規(guī)則
9.6 消息級(jí)接口規(guī)則
9.7 【例】附件——某企業(yè)的數(shù)據(jù)接口規(guī)范舉例
1346511667110 大數(shù)據(jù)系統(tǒng)數(shù)據(jù)模型
-------------------------------------------------------------
10.1 HDOOP 系統(tǒng)中不需要數(shù)據(jù)模型了嗎？
10.2 Hadoop 的生態(tài)及組件
10.3 對(duì)內(nèi)服務(wù)和對(duì)外服務(wù)的關(guān)系
10.4 大數(shù)據(jù)系統(tǒng)的物理模型
10.5 參照表的設(shè)計(jì)
10.6 實(shí)體命名規(guī)則
10.7 實(shí)體定義
10.8 數(shù)據(jù)湖的數(shù)據(jù)建模
10.9 【例】附件——某企業(yè)大數(shù)據(jù)系統(tǒng)建模舉例
1346511531811 總結(jié)
-------------------------------------------------------------

段方老師的其它課程