【正文】 源目標(biāo)和目標(biāo)系統(tǒng)角色可交換(源系統(tǒng)作為目標(biāo)系統(tǒng)，目標(biāo)系統(tǒng)作為源系統(tǒng))，但是需要保證同一數(shù)據(jù)模型必須單向ODI開發(fā)； 源/目標(biāo)系統(tǒng)建立物料架構(gòu)時(shí)，如下兩處地方需要設(shè)置為ODI用戶：創(chuàng)建資料庫ODI在ERP系統(tǒng)搭建環(huán)境，其TNS信息為：BEST=(DESCRIPTION= (ADDRESS=(PROTOCOL=tcp)(HOST=)(PORT=1522)) (CONNECT_DATA= (SID=BEST) ) )l 資料庫概念：摘自《Oracle Data Integrator應(yīng)用指南》Master Repository，保存企業(yè)所有IT資源的Topology，保存項(xiàng)目和數(shù)據(jù)模型的安全信息、版本信息，供ODI圖形模塊等使用。 目標(biāo)系統(tǒng) MDMcreate user soau identified by soau default tablespace soau_data。創(chuàng)建腳本如下： 創(chuàng)建ODI用戶(Work Schema) 源系統(tǒng) ERPcreate user soau identified by soau default tablespace soau_data。創(chuàng)建ODI用戶ODI用戶就是指數(shù)據(jù)庫為ODI開發(fā)而創(chuàng)建的用戶，就是說ODI通過此用戶連接數(shù)據(jù)庫，又是ODI的Work Schema。 IKM：完成從臨時(shí)表的數(shù)據(jù)加載到目標(biāo)表。KM(知識(shí)模塊)ODI的知識(shí)模塊主要分為幾個(gè)大類(RKM,CKM,LKM,IKM,SKM)，其中最重要的是LKM(load KM)和IKM(Integration KM)RKM： RKM：完成從源系統(tǒng)和目標(biāo)系統(tǒng)的數(shù)據(jù)結(jié)構(gòu)的反向工程來形成數(shù)據(jù)模型的功能。靜態(tài)接口用于數(shù)據(jù)初始化，只在接口運(yùn)行初期執(zhí)行一次。Designer：是ODI開發(fā)的主要組件，創(chuàng)建和執(zhí)行DataStores、Interfaces、Procedure、Packages，客戶化KM等操作Operator：管理和監(jiān)控?cái)?shù)據(jù)轉(zhuǎn)換任務(wù)的執(zhí)行情況，可用于調(diào)試。青啤PTS項(xiàng)目：PTS項(xiàng)目數(shù)據(jù)分為基礎(chǔ)數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)，都采用ODI使這些數(shù)據(jù)流轉(zhuǎn)在ERP、Data Center、總PTS、分PTS、CDCPTS等系統(tǒng)間。 注：如有錯(cuò)誤或疑問，請(qǐng)大家歡迎提出和指正。業(yè)務(wù)對(duì)業(yè)務(wù)的了解主要方式是和業(yè)務(wù)顧問進(jìn)行交流，在EBS界面上跑業(yè)務(wù)流程等。主要是對(duì)ODI開發(fā)進(jìn)行一次總結(jié)，描述對(duì)ODI技術(shù)開發(fā)的認(rèn)識(shí)和了解。更多ODI開發(fā)技術(shù)可參閱《Oracle Data Integrator應(yīng)用指南》文檔。1．MDM項(xiàng)目業(yè)務(wù)認(rèn)識(shí)：集中對(duì)數(shù)據(jù)進(jìn)行管理，數(shù)據(jù)標(biāo)準(zhǔn)化，流程固化。ODI開發(fā)工作小結(jié)簡單敘述在項(xiàng)目做過的ODI開發(fā)及相關(guān)信息ODI開發(fā)業(yè)務(wù)背景主要涉及ODI開發(fā)的項(xiàng)目：青啤MDM項(xiàng)目和PTS項(xiàng)目。ODI組件ODI主要是以下組件組成的：資料庫(Repository)：Master Repository、Work Repository。計(jì)劃代理(Schedule Agent)：屬于Runtime組件，因?yàn)镺DI采用ELT架構(gòu)，所以Schedule Agent只用來調(diào)度執(zhí)行ELT任務(wù)，其數(shù)據(jù)轉(zhuǎn)換引擎很少用到。動(dòng)態(tài)接口用于數(shù)據(jù)維護(hù)，是實(shí)時(shí)性的。CKM：完成數(shù)據(jù)質(zhì)量檢查。 SKM：完成ODI和WEB服務(wù)接口的功能。ODI用戶權(quán)限較大，能否訪問其他用戶的數(shù)據(jù)。grant connect,resource to soau。grant connect,resource to soau。通常創(chuàng)建一個(gè)即可。一個(gè)Work Repository只能連接一個(gè)Master Repository。 grant connect, resource to soam。說明： 用戶/密碼為什么輸入SUPERVISOR/SUNOPSIS ? 用戶/密碼其實(shí)是Security Manager Users，就是說安全管理用戶才有權(quán)限連接主資料庫，這類用戶作為Security Repository Connections Users。更多用戶安全管理設(shè)置可參閱：l 創(chuàng)建工作資料庫(Work Repository) ERP 創(chuàng)建Work Repository用戶create user soaw identified by soaw default tablespace users。ODI架構(gòu)搭建ODI中所使用的數(shù)據(jù)模型基礎(chǔ)是邏輯架構(gòu)，而邏輯架構(gòu)對(duì)應(yīng)了物理架構(gòu)。當(dāng)執(zhí)行ODI接口時(shí)，ODI會(huì)根據(jù)源數(shù)據(jù)服務(wù)器的Instance/，如果匹配成功，ODI會(huì)自動(dòng)根據(jù)TNS信息與源數(shù)據(jù)庫之間創(chuàng)建DBLINK；如果匹配不成功，表示沒有明確DBLINK建立對(duì)象，DBLINK創(chuàng)建后無法正常連接，導(dǎo)致ODI接口執(zhí)行會(huì)拋出錯(cuò)誤信息：TNS:could not resolve the connect identifier specified所以輸入Instance/dblink(Data Server)信息前。創(chuàng)建物理架構(gòu)上面步驟確定后，會(huì)自動(dòng)彈出創(chuàng)建物理架構(gòu)的界面：說明：Schema 和 Work Schema的區(qū)別Schema(架構(gòu))是指數(shù)據(jù)源所在，也就是我們需要抽取的數(shù)據(jù)源或者是要把數(shù)據(jù)放進(jìn)去的數(shù)據(jù)源；Work Schema(工作架構(gòu)) 是指ODI開發(fā)存放臨時(shí)表的地方。點(diǎn)擊OK按鈕，會(huì)出現(xiàn)一個(gè)警告(提示需要指定上行文，因?yàn)檫壿嫾軜?gòu)還沒創(chuàng)建，可以先忽略)，點(diǎn)擊OK物理架構(gòu)的創(chuàng)建就完成了。用相同的方式創(chuàng)建MDM系統(tǒng)的邏輯架構(gòu)。創(chuàng)建邏輯代理Topology Manager\Logical Architecture\Agents\右鍵\Insert Logical Agent輸入如下信息：Name：FP Agent Physical Agents選擇FP Agent點(diǎn)擊OK，邏輯代理創(chuàng)建完成。啟動(dòng)計(jì)劃代理(Scheduler Agent)216。因?yàn)闀簳r(shí)ERP測試環(huán)境沒有代理服務(wù)器，也沒有創(chuàng)建代理服務(wù)器的權(quán)限。創(chuàng)建項(xiàng)目(Projects)由于本ODI開發(fā)總結(jié)選取的案例是青啤MDM項(xiàng)目中ERPMDM的ODI開發(fā)：源系統(tǒng)是ERP，目標(biāo)系統(tǒng)式MDM。當(dāng)然也可以更細(xì)或更廣的劃分，比如在青啤正式的ODI開發(fā)中，所有的ODI開發(fā)都放在TSINGTAO里面，并沒有很細(xì)的劃分；而在《Oracle Data Integrator應(yīng)用指南》中，直接用ORCL_DEMO的ODI開發(fā)作為Project，劃分得很細(xì)。創(chuàng)建模型(Models)點(diǎn)擊Designer組件的Models TAB 頁圖標(biāo)，新建Models Folder，命名為ERP System，點(diǎn)擊OK即可完成Model Folder的創(chuàng)建，右鍵已經(jīng)創(chuàng)建的Model Foder：ERP System， 選擇Inser Model，輸入如下信息，點(diǎn)擊OK，ERP系統(tǒng)的Model創(chuàng)建完成了。此章節(jié)描述了標(biāo)準(zhǔn)反向，客戶化反向涉及了RKM，將在KM(知識(shí)模塊)基礎(chǔ)章節(jié)RKM中進(jìn)行詳細(xì)的說明。按照ODI開發(fā)要求，還需要?jiǎng)?chuàng)建對(duì)應(yīng)的ERP ，本次案例沒有將其獨(dú)立出來。建立反向ERP系統(tǒng)視圖的物理架構(gòu)和邏輯架構(gòu)(參考ODI架構(gòu)搭建章節(jié))：ERP ，建立成功后如下圖，Designer\Models\ERP System 右鍵模型ERP ，選擇Edit，(或雙擊模型)選擇Reverse(反向) TAB頁，輸入如下信息，Definition TAB 頁：Reverse TAB 頁：點(diǎn)擊按鈕，稍等片刻，Datastore就反向出來了，如圖所示，l 目標(biāo)系統(tǒng)的Datastores反向反向前準(zhǔn)備：CREATE synonym FOR 。創(chuàng)建和執(zhí)行接口(Interfaces)ODI接口開發(fā)是ODI開發(fā)的核心。點(diǎn)擊OK，創(chuàng)建接口完成。end。 執(zhí)行過程(Designer\Projects\singTaoMDM\ERPMDM\Procedures\) 右鍵創(chuàng)建好的過程 選擇Excute執(zhí)行后，切換到Operator查看執(zhí)行結(jié)果登錄到目標(biāo)系統(tǒng)數(shù)據(jù)庫(MDM)查看Product表中是否有需要導(dǎo)入的物料信息。216。注意，連接的順序是包執(zhí)行的順序。如圖所示216。過程和接口創(chuàng)建和執(zhí)行方案方式相同。繼續(xù)展開Scenario：ERP_MDM_IMPORT_ITEMS，右鍵 Insert Scheduling輸入如下信息Definition TAB頁：定義上下文、代理、日志級(jí)別、活動(dòng)期間、執(zhí)行頻率Execution Cycle TAB頁：定義執(zhí)行時(shí)的循環(huán)次數(shù)、循環(huán)起始時(shí)間、循環(huán)間隔等上圖定義的是每10分鐘執(zhí)行一次。CDC概述CDC捕獲源數(shù)據(jù)的變動(dòng)情況記錄到日記表，在傳遞數(shù)據(jù)時(shí)，只需要依據(jù)日志表中記錄而無需考慮未變動(dòng)的數(shù)據(jù)，大大提高ELT的效率。Capture processes：捕獲進(jìn)程，用來捕獲數(shù)據(jù)源上的數(shù)據(jù)變化并寫入Journals中，通常指的就是觸發(fā)器；也可用數(shù)據(jù)源上可用的專門的捕獲程序（例如支持從數(shù)據(jù)源服務(wù)器log獲取數(shù)據(jù)的程序）。沒有特殊需求，這個(gè)默認(rèn)設(shè)置可以進(jìn)行ODI的CDC接口開發(fā)。一致性集（Consistent Set）：當(dāng)一組Datastore采用CDC方式時(shí)，為保證數(shù)據(jù)的前后順序和完整性制約關(guān)系，我們需要告訴ODI按照一定的順序來抓取，ODI是通過設(shè)置Consistency Window來實(shí)現(xiàn)的。添加到CDC(Add to CDC)Add to CDC作用是將一個(gè)模型標(biāo)記為可以進(jìn)行CDC接口開發(fā)的模型。創(chuàng)建CDC接口的時(shí)候此Datastore就可以增加日志字段了。表示添加訂閱者執(zhí)行成功。步驟4是注冊訂閱者。特別說明： 啟動(dòng)日志會(huì)刪掉當(dāng)前Datastore所有的日志數(shù)據(jù)，相當(dāng)于初始化了該Datastore的日志。啟動(dòng)日志本質(zhì)就是執(zhí)行了JKM，所以將在KM(知識(shí)模塊)基礎(chǔ)的JKM模塊中對(duì)啟動(dòng)日志進(jìn)行詳細(xì)的探討。點(diǎn)擊OK保存，CDC接口創(chuàng)建完成。此總結(jié)只描述了JKM的客戶化開發(fā)。點(diǎn)擊，然后進(jìn)入Operator查看ODI是如何反向Datastores的。其他的Step如果想進(jìn)行了解，可以將這些步驟執(zhí)行的語句Copy到數(shù)據(jù)庫運(yùn)行，查看運(yùn)行結(jié)果和語句取值邏輯可以了解ODI想做什么。Subscriber224。其他步驟參考CDC接口開發(fā)章節(jié)中啟動(dòng)日志(Start Journal)。SOAU39。TRIGGER39。但是經(jīng)過測試發(fā)現(xiàn)，只有對(duì)視圖進(jìn)行Insert、Update、Delete操作ODI才會(huì)寫入日志，而對(duì)視圖關(guān)