DM8 數據中心解決方案 — 達夢實時同步工具

徐飛
國防科技大學信息通信學院副教授，長期從事數據管理領域的教學與科研工作，主編參編專著4部、教材講義10餘部，承擔和參與國家及軍隊重點科研項目10餘項，先後獲省部級科技進步獎一等獎1項、大學教學成果獎一等獎1項。發表學術論文20餘篇，獲得國家發明專利3項、國防專利5項、軟件著作權7項。

第1章概述 1
1.1 達夢實時同步工具技術原理 1
1.2 達夢實時同步工具技術特點 2
1.3 達夢實時同步工具系統架構 3
1.3.1 管理模塊 4
1.3.2 捕獲模塊 4
1.3.3 裝載模塊 4
1.3.4 傳輸模塊 5
1.3.5 執行模塊 5
1.4 達夢實時同步工具常用部署拓撲結構 6
1.4.1 應急災備系統 6
1.4.2 多業務中心 7
1.4.3 實時異構資源信息整合 8
1.4.4 改進數據倉庫架構 8
1.4.5 數據遷移及系統升級 9
1.5 達夢實時同步工具使用約束 10
1.5.1 支持說明 10
1.5.2 使用限制 10

第2章裝載與配置 11
2.1 數據字典裝載 11
2.1.1 數據字典原理簡介 12
2.1.2 數據字典裝載說明 13
2.2 數據初始化裝載 13
2.2.1 直接數據傳輸初始化裝載 13
2.2.2 使用備份文件進行初始化裝載 13
2.3 達夢實時同步工具配置文件說明 15
2.3.1 管理模塊配置 15
2.3.2 捕獲模塊配置 18
2.3.3 傳輸模塊配置 23
2.3.4 執行模塊配置 28
2.4 捕獲器配置 32
2.4.1 捕獲器目的端 33
2.4.2 捕獲器配置方法 33
2.4.3 啟動捕獲器 35
2.4.4 停止捕獲器 37
2.5 執行器配置 37
2.5.1 執行器數據來源 38
2.5.2 執行器配置方法 39
2.5.3 啟動執行器 40
2.5.4 停止執行器 41
2.6 路由器配置 42
2.6.1 路由器數據來源 43
2.6.2 路由器目的端 43
2.6.3 路由器配置方法 43
2.6.4 啟動路由器 45
2.6.5 停止路由器 45
2.7 轉發器配置 46
2.7.1 轉發器數據來源 47
2.7.2 轉發器目的端 47
2.7.3 轉發器配置方法 47
2.7.4 啟動轉發器 49
2.7.5 停止轉發器 50

第3章Windows平台DM8-DM8單向複製 52
3.1 同步概述 52
3.2 在Windows平台的DMHS安裝 53
3.3 源端和目的端配置前準備 61
3.3.1 源端配置前準備 61
3.3.2 目的端配置前準備 63
3.4 配置源端 63
3.5 配置目的端 65
3.6 初始化裝載 65
3.7 開啟數據實時同步 66
3.8 DDL及DML操作測試驗證 67

第4章Linux平台Oracle-DM8單向複製 69
4.1 同步概述 69
4.2 在Linux平台的DMHS安裝 69
4.2.1 圖形界面安裝方法 70
4.2.2 命令行安裝方法 71
4.3 源端和目的端配置前準備 71
4.3.1 源端配置前準備 71
4.3.2 目的端配置前準備 75
4.4 源端配置 75
4.5 目的端配置 76
4.6 初始化裝載 77
4.7 同步服務啟動 78
4.8 DDL及DML操作測試驗證 78

第5章Linux平台DM8-DM8雙向複製 80
5.1 同步概述 80
5.2 源端配置前準備 81
5.2.1 DM8數據庫歸檔及邏輯日誌啟用 81
5.2.2 配置DDL同步 81
5.3 配置源端和目的端 83
5.4 初始化裝載 85
5.5 開啟數據實時同步 86
5.6 DDL及DML操作測試驗證 86

第6章對比工具 87
6.1 對比工具概述 87
6.1.1 系統架構 87
6.1.2 運行環境 88
6.1.3 提供的支持 89
6.1.4 安裝及使用方法 90
6.2 配置說明 93
6.2.1 對比代理AGENT配置 94
6.2.2 對比工具VERI配置 95
6.2.3 作業文件配置 97
6.3 運行對比工具執行數據對比 98
6.3.1 Oracle與DM8的對比 98
6.3.2 Oracle與Oracle的對比 103

第7章Web監控 107
7.1 Web監控管理平台架構 107
7.1.1 架構概況 108
7.1.2 運行原理 108
7.1.3 環境要求 109
7.2 Web監控管理平台安裝部署 109
7.2.1 開啟DMHS管理平台服務 109
7.2.2 DMHS服務器註冊 111
7.2.3 配置管理 112
7.2.4 裝載初始數據 114
7.2.5 數據同步的開啟與停止 115
7.2.6 運行狀態監控 117
7.3 Web監控管理平台運維管理 118
7.3.1 服務管理 118
7.3.2 主機資源監控 133
7.3.3 同步鏈路監控 137
7.3.4 告警監控 159

第8章日常維護 163
8.1 DMHS運行狀態檢查 163
8.1.1 運行日誌 163
8.1.2 模塊狀態 163
8.1.3 統計信息 164
8.1.4 檢查點信息 165
8.1.5 同步性能 165
8.1.6 歸檔清理 166
8.2 DMHS常見故障處理 166
8.2.1 啟動失敗 166
8.2.2 運行報錯 167
8.2.3 檢查點阻塞 169
8.2.4 同步阻塞 169
8.2.5 DDL未同步 171
8.2.6 進程異常 171
8.2.7 雙向死循環 171
8.2.8 級聯丟數或數據重複 172
8.2.9 數據不同步 172
8.2.10 使用COPY命令裝載處理同步出錯表數據 173
8.3 DMHS同步性能診斷與優化 190
8.3.1 同步性能檢查 190
8.3.2 同步性能優化 192

第9章實際應用中常見場景及案例分析 195
9.1 目標概述 195
9.2 一對多同步 195
9.2.1 初始數據裝載 196
9.2.2 同步配置 196
9.3 多對一同步 197
9.3.1 初始數據裝載 198
9.3.2 同步配置 198
9.4 級聯同步 199
9.4.1 初始數據裝載 200
9.4.2 級聯同步配置 200
9.4.3 使用限制 202
9.5 數據轉換 202
9.5.1 數據過濾及映射 202
9.5.2 文件轉換功能 203
9.6 案例分析 206
9.6.1 南京無錫兩地三中心災備 206
9.6.2 湖北公安云信息綜合平台數據同步 207
9.6.3 泰國教育雲平台項目數據同步 208
9.6.4 國家電網調度系統數據同步 209
9.6.5 海南社保異構數據庫容災 209