數(shù)據(jù)湖倉(cāng)

第 1章　讓數(shù)據(jù)可信　1
1.1 做一個(gè)成熟的終端用戶　2
1.2 不斷攀升的可信目標(biāo)　5
1.3 可信數(shù)據(jù)的要素　7
1.4 小結(jié)　8
第 2章 基礎(chǔ)數(shù)據(jù)　9
2.1 構(gòu)建應(yīng)用程序　9
2.2 以人工智能醫(yī)療為例　10
2.3 基礎(chǔ)數(shù)據(jù)的組成要素　12
2.4 小結(jié)　14
第3章 如何避免不良數(shù)據(jù)　15
3.1 輸入錯(cuò)誤　16
3.2 鍵的問題　18
3.3 重復(fù)記錄　18
3.4 拼寫錯(cuò)誤　19
3.5 兼容性　19
3.6 編制文檔　21
3.7 小結(jié)　22
第4章 不同類型的數(shù)據(jù)　24
4.1 數(shù)據(jù)量　24
4.2 數(shù)據(jù)的業(yè)務(wù)價(jià)值　25
4.3 數(shù)據(jù)的訪問概率　27
4.4 數(shù)據(jù)降級(jí)　29
4.5 基于大容量存儲(chǔ)器的數(shù)據(jù)歸檔機(jī)制　30
4.6 小結(jié)　30
第5章 數(shù)據(jù)抽象　31
5.1 結(jié)構(gòu)化數(shù)據(jù)模型　32
5.2 本體和分類標(biāo)準(zhǔn)　34
5.3 模擬/物聯(lián)網(wǎng)數(shù)據(jù)的蒸餾算法　36
5.4 小結(jié)　37
第6章 結(jié)構(gòu)化數(shù)據(jù)　39
6.1 業(yè)務(wù)交易生成的數(shù)據(jù)　40
6.2 結(jié)構(gòu)化記錄　40
6.3 鍵　42
6.4 聯(lián)機(jī)事務(wù)處理　43
6.5 組織數(shù)據(jù)　45
6.6 小結(jié)　46
第7章 文本數(shù)據(jù)　48
7.1 文本數(shù)據(jù)的類型　48
7.2 使用文本數(shù)據(jù)時(shí)的語(yǔ)言障礙　50
7.3 多義詞　51
7.4 提取業(yè)務(wù)的含義　51
7.5 小結(jié)　54
第8章 模擬/物聯(lián)網(wǎng)數(shù)據(jù)　56
8.1 數(shù)據(jù)有用性的差異　57
8.2 攝像頭　58
8.3 人工審視　59
8.4 日期分隔　60
8.5 數(shù)據(jù)篩選　61
8.6 閾值方法　61
8.7 時(shí)間排序方法　62
8.8 小結(jié)　63
第9章 大容量存儲(chǔ)器與數(shù)據(jù)湖倉(cāng)　65
9.1 大容量存儲(chǔ)器的優(yōu)缺點(diǎn)　66
9.2 訪問概率　67
9.3 索引　70
9.4 元數(shù)據(jù)和大容量存儲(chǔ)器　71
9.5 小結(jié)　71
第 10章 數(shù)據(jù)架構(gòu)與數(shù)據(jù)工程　73
10.1 兩個(gè)角色如何通力配合　74
10.2 角色與數(shù)據(jù)類型　75
10.3 小結(jié)　79
第 11章 業(yè)務(wù)價(jià)值　81
11.1 業(yè)務(wù)價(jià)值才是驅(qū)動(dòng)力　81
11.2 一切都離不開錢　82
11.3 基礎(chǔ)數(shù)據(jù)　83
11.4 難以協(xié)調(diào)　84
11.5 領(lǐng)域　85
11.6 小結(jié)　86
第 12章 數(shù)據(jù)需要的層次　87
12.1 數(shù)據(jù)獲取　89
12.2 數(shù)據(jù)傳輸與存儲(chǔ)　90
12.3 數(shù)據(jù)轉(zhuǎn)換　91
12.4 數(shù)據(jù)標(biāo)簽、整合與匯聚　92
12.5 數(shù)據(jù)分析與機(jī)器學(xué)習(xí)　93
12.6 小結(jié)　95
第 13章 數(shù)據(jù)湖倉(cāng)中的數(shù)據(jù)集成　97
13.1 不同種類數(shù)據(jù)的集成　98
13.2 自動(dòng)集成　98
13.3 ETL　99
13.4 文本ETL　101
13.5 數(shù)據(jù)蒸餾算法　103
13.6 小結(jié)　104
第 14章 分析　105
14.1 結(jié)構(gòu)化數(shù)據(jù)分析　105
14.2 文本數(shù)據(jù)分析　107
14.3 模擬/物聯(lián)網(wǎng)數(shù)據(jù)分析　108
14.4 結(jié)構(gòu)化數(shù)據(jù)和文本數(shù)據(jù)的結(jié)合　109
14.5 連接3個(gè)環(huán)境　111
14.6 執(zhí)行分析　112
14.7 小結(jié)　113
第 15章 軟數(shù)據(jù)　114
15.1 電子表格數(shù)據(jù)　115
15.2 互聯(lián)網(wǎng)數(shù)據(jù)　116
15.3 政府?dāng)?shù)據(jù)　117
15.4 小結(jié)　117
第 16章 描述性數(shù)據(jù)　119
16.1 數(shù)據(jù)模型　121
16.2 元數(shù)據(jù)　122
16.3 結(jié)構(gòu)化數(shù)據(jù)轉(zhuǎn)換　123
16.4 結(jié)構(gòu)化數(shù)據(jù)源　124
16.5 數(shù)據(jù)選擇標(biāo)準(zhǔn)　125
16.6 數(shù)據(jù)定義語(yǔ)言　125
16.7 數(shù)據(jù)編碼　126
16.8 數(shù)據(jù)關(guān)系　127
16.9 文本數(shù)據(jù)　128
16.10 本體　129
16.11 分類標(biāo)準(zhǔn)　131
16.12 關(guān)聯(lián)　132
16.13 上下文情境　133
16.14 文本數(shù)據(jù)源　134
16.15 模擬/物聯(lián)網(wǎng)數(shù)據(jù)　135
16.16 算法　136
16.17 閾值　136
16.18 時(shí)間排序　137
16.19 模擬/物聯(lián)網(wǎng)數(shù)據(jù)源　138
16.20 數(shù)據(jù)血緣　138
16.21 小結(jié)　139
第 17章 數(shù)據(jù)目錄　140
17.1 永久維護(hù)　141
17.2 開放　141
17.3 不同數(shù)據(jù)類型的內(nèi)部結(jié)構(gòu)　142
17.4 小結(jié)　143
第 18章 數(shù)據(jù)架構(gòu)的演化　144
18.1 伊始　144
18.2 應(yīng)用程序　145
18.3 磁帶文件　146
18.4 硬盤存儲(chǔ)　147
18.5 OLTP　148
18.6 個(gè)人計(jì)算機(jī)　149
18.7 4GL處理技術(shù)和數(shù)據(jù)抽取應(yīng)用程序　150
18.8 數(shù)據(jù)倉(cāng)庫(kù)　152
18.9 數(shù)據(jù)集市　153
18.10 互聯(lián)網(wǎng)和物聯(lián)網(wǎng)數(shù)據(jù)　154
18.11 數(shù)據(jù)湖　155
18.12 數(shù)據(jù)湖倉(cāng)　157
18.13 小結(jié)　158