數(shù)據(jù)遷移工具匯報(bào)(編輯修改稿)
2025-09-11 21:57 本頁(yè)面
【文章內(nèi)容簡(jiǎn)介】 DC同步 觸發(fā)器同步 按照捕獲數(shù)據(jù)變化方式，同步分為解析歸檔日志同步、觸發(fā)器同步及 CDC同步三種模式。 歸檔日志同步 通過(guò)開(kāi)啟數(shù)據(jù)庫(kù)歸檔模式 ， 用戶(hù)對(duì)數(shù)據(jù)庫(kù)的變更會(huì)自動(dòng)寫(xiě)入歸檔日志中 ， 同步工具通過(guò)解析日志的方式 ， 將數(shù)據(jù)變更解析出來(lái) ， 同步到目標(biāo)數(shù)據(jù)庫(kù)中 。 觸發(fā)器同步 通過(guò)建立同步表的觸發(fā)器 ， 將用戶(hù)對(duì)表的各種操作記錄到指定的日志表中 ， 通過(guò)解析日志表 ， 獲取用戶(hù)數(shù)據(jù)的變更 ， 實(shí)現(xiàn)與目標(biāo)數(shù)據(jù)庫(kù)的同步 。 CDC同步 Oracle自帶數(shù)據(jù)定閱技術(shù) ， 可將數(shù)據(jù)變更信息自動(dòng)同步到別一個(gè)用戶(hù)下 ， 同步軟件解析用戶(hù)的定閱信息 ， 實(shí)現(xiàn)與目標(biāo)數(shù)據(jù)庫(kù)的同步 。 模塊說(shuō)明 三、功能介紹 數(shù)據(jù)同步 ?技術(shù)成熟，數(shù)據(jù)庫(kù)各版本支持 ?成熟的軟件均采用此模式 歸檔日志模式 ?適用亍較少數(shù)據(jù)量和丌頻繁變化的數(shù)據(jù) ?需對(duì)相關(guān)數(shù)據(jù)表建觸發(fā)器 觸發(fā)器 模式 ?數(shù)據(jù)庫(kù)版本有要求， 10g版本以下效率較低。 ? BUG。 CDC 模式 以歸檔模式為主 模塊說(shuō)明 三、功能介紹 數(shù)據(jù)同步 解析日志同步中，解析日志和數(shù)據(jù)入庫(kù)采用異步模式，避免了網(wǎng)絡(luò)出現(xiàn)異常后同步數(shù)據(jù)丟失。 源數(shù)據(jù)庫(kù) 數(shù)據(jù)緩存文件 目標(biāo) 數(shù)據(jù)庫(kù) 解析日志 數(shù)據(jù)入庫(kù) 模塊流程 三、功能介紹 數(shù)據(jù)同步 首先通過(guò)上次解析的日志文件 SEQ號(hào)判斷并獲取新增的日志文件列表。 然后通過(guò)上次解析日志的SCN號(hào)判斷該日志文件要解析的日志記錄。 最后解析日志文件，并過(guò)濾解析的日志記錄，緩存成多個(gè)固定大小的數(shù)據(jù)文件。 源數(shù)據(jù)庫(kù) 歸檔日 志文件 上次解析 日志 SEQ 要解析的日志 文件列表 上次解析 日志 SCN 解析日志 起始 SCN 數(shù)據(jù)緩存文件 操作日志記錄 同步表對(duì)應(yīng) 關(guān)系列表 日志解析 三、功能介紹 數(shù)據(jù)同步 三、功能介紹 首先通過(guò)上次入庫(kù)的 SCN號(hào)過(guò)濾數(shù)據(jù)，并判斷記錄數(shù)據(jù)是否含所有大字段的表。 然后再根據(jù)表對(duì)應(yīng)關(guān)系判斷是否可以直接解析重做 sql直接入庫(kù)，如果丌能直接入庫(kù)就要根據(jù)唯一健獲取源數(shù)據(jù)。 最后通過(guò)表對(duì)應(yīng)關(guān)系和字段對(duì)應(yīng)關(guān)系入目標(biāo)庫(kù)。 源數(shù)據(jù)庫(kù) 解析主鍵 獲取數(shù)據(jù) 上次入庫(kù) 記錄 SCN 入庫(kù)記錄 起始 SCN 數(shù)據(jù)緩存文件 普通日志記錄 簡(jiǎn)單 對(duì)應(yīng) 含有字段記錄 表對(duì)應(yīng) 關(guān)系 復(fù)雜 對(duì)應(yīng) 源數(shù)據(jù) 目標(biāo)數(shù)據(jù)庫(kù) 解 析 重 做 sql 詫 句 數(shù)據(jù)入庫(kù) 數(shù)據(jù)同步 文件導(dǎo)入 遷移工具的文件操作包括 Excel文件的導(dǎo)入、導(dǎo)出和 dbf文件的導(dǎo)入、導(dǎo)出。其中 Excel文件的導(dǎo)入支持對(duì)應(yīng)關(guān)系模板的定制導(dǎo)入，從而支持復(fù)雜 Excel的導(dǎo)入功能。 Dbf導(dǎo)入支持名稱(chēng)模糊匹配功能，實(shí)現(xiàn)了 dbf文件的批量導(dǎo)入功能。 三、功能介紹 遷移工具所有設(shè)置和操作都支持可視化，都有相應(yīng)的界面供用戶(hù)操作，其中表不表對(duì)應(yīng)關(guān)系、字段對(duì)應(yīng)關(guān)系等操作支持拖拽設(shè)置，符合大多數(shù)用戶(hù)操作習(xí)慣，具有用戶(hù)使用方便、
化學(xué)相關(guān)推薦
鄂ICP備17016276號(hào)-1