powercenter學(xué)習(xí)總結(jié)-全文預(yù)覽
【正文】 tionships(產(chǎn)生等級關(guān)系)分兩種Viewa) Normalized views通過PK與FK的關(guān)聯(lián)來減少冗余的multipleoccurring data(如Employee,Address)b) Denormalized views此類型相當(dāng)與把幾個表的所有Column關(guān)系成一個大表，會有重復(fù)數(shù)據(jù)，如果沒有定義類型則系統(tǒng)會默認(rèn)為String.(二) Generating Entity Relationships (產(chǎn)生實體關(guān)系)比等級關(guān)系多了一個根層. Using Substitution Groups in an XML Definition 當(dāng)你導(dǎo)入使用了Substitution Groups的XML,PM會把每個成員分成一個組，比如地址：分為加拿大，美國，中國。1. Joiner可以用來連接兩個相關(guān)的不同來源的數(shù)據(jù)集；2. 至少需要指定一個匹配端口；3. 對兩個來源有如下限制：A. 兩個數(shù)據(jù)源要求是來自兩個Pipeline或者一個Pipeline的兩個分支；B. 任何一個Pipeline中都不能含有Update Stragegy；C. Sequence不能直接連到Joiner；4. Joiner的主要屬性如下：A. 比較時大小寫敏感；B. 緩存目錄，數(shù)據(jù)緩存的大小，索引緩存的大??；C. 連接類型（Normal，Master Outer，Detail Outer，F(xiàn)ull Outer）；D. 輸入已排序：輸入數(shù)據(jù)已按連接端口的順序排好序，這可以減少磁盤輸入及輸出，提高了Joiner的性能；5. 指定非重復(fù)值少的表作為Master表可以提升性能，默認(rèn)情況下，第一個加入的數(shù)據(jù)源是Detail；6. 只支持相等連接，當(dāng)使用多個連接端口時，連接的順序?qū)π阅苡杏绊懀?. 連接端口如果含有NULL值，連接不會成功；8. Joiner一次只能連接兩個數(shù)據(jù)源，如果有多個數(shù)據(jù)源要進(jìn)行連接，使用多個Joiner；9. Joiner可以連接來自同一個Source的數(shù)據(jù)流（自連），有兩個方法：如果Joiner選擇了Sorted Input屬性，可以用一個Source Instance來實現(xiàn)，否則就需要Source的兩個Instance；10. Joiner的Index Cache（連接端口） 以及Data Cache（其它端口）是針對Master表建立的；11. 在不同的配置條件下，Joiner有不同的阻塞策略，這樣可以用更少的Cache，對性能有不同的影響；12. 在有可能的情況下，盡可能在數(shù)據(jù)庫完成連接處理；1. 在關(guān)系型數(shù)據(jù)庫處理中，Normalizer用來從一行變成多行；如:f1 f2 f3一行三個字段處理后可變成f1 f2,f1 f3兩行兩字段,如下圖 2. Generated Key，自動產(chǎn)生不能刪除的端口，命名為GK_XXX，由這個端口產(chǎn)生一個序列號值，在需要時可以作為主鍵，運行成功后會在知識庫中保存下一個值，可以在Mapping中看到下一個值，可以修改這個值；3. Generated Column ID，自動產(chǎn)生不能刪除的端口，命名為GCID_occuring_field_name，這個端口產(chǎn)生一個序號指名當(dāng)前輸出來自多個輸入中的哪一個；4. Reset和Restart屬性：會話結(jié)束時重置GK值到上次的值或者到1；1. Router和Filter很相似，Router可以用一或多個Filter來取代，不同的是用Router來生成多個組時輸入數(shù)據(jù)只需處理一次，所以效率更高；2. Router 由一個輸入組，一到多個用戶定義的輸出組和一個默認(rèn)組組成，每一個用戶定義的輸出組含一個測試條件，滿足條件的輸入數(shù)據(jù)會進(jìn)入相應(yīng)的用戶定義組，不滿足所有用戶定義條件的數(shù)據(jù)會進(jìn)入默認(rèn)組；3. 輸入組和輸出組的端口類型和名稱相同；4. Powercenter根椐連接的用戶定義輸出組的順序來進(jìn)行評估，如果默認(rèn)組沒有連接，則不評估那些沒有連接的用戶定義輸出組；5. 如果某一行符合多個輸出組的評估條件，則出現(xiàn)在多個組的輸出數(shù)據(jù)流中；6. 可以將一個輸出組的端口連到多個Transformation或者Target上，但不能將多個輸出組的端口連到一個Transformation或者Target上；1. Sequence用來產(chǎn)生序列號用以作為主鍵欄位，可以重用；2. 只有兩個輸出端口：Nextval和Currval；3. 通過配置Start Value，End Value，Current Value 和 Cycle屬性，可以讓產(chǎn)生的Nextval在一個指定的范圍內(nèi)循環(huán)；4. 可以將Nextval端口連到多個Target上，這時是阻塞式的產(chǎn)生序列號的，可以保證多個Target得到不同的序列號，如果想要得到相同的序列號，可以將Nextval端口連到Target之前的一個共有的Transformation上；5. 如果只連出Currval，得到的是一個常量，并且一次阻塞只能獲得一個值，所以為性能考量，一般都不連出這個端口，如果Nextval同時有連出，這時Currval = Nextval + Increment By；6. 在沒有配置Cycle屬性時，如果序列號達(dá)到了End Value，會話會失??；7. 不重用的Sequence有Reset屬性，啟用以后，在每個會話結(jié)束時會將Current Value置為會話開始時的值，這個值是它產(chǎn)生的第一個值；8. 當(dāng)Sequence配置成重用時，應(yīng)該給Number of Cached Values 一個大于零的緩存值，,那么一個線程在從1開始在跑,.1. Sorter用來排序數(shù)據(jù)，可以指定多個排序端口，每個端口可以指定升降序，字符串比較時可以忽略大小寫，還可以用Distinct選項來消除重復(fù)(所有端口,包括沒有指定排序的端口)；2. 排序時會用到輸入數(shù)據(jù)兩倍大小或者更大的空間，默認(rèn)的排序Cache是8M，可選的排序Cache范圍是1M到4G，排序Cache不夠時，服務(wù)器會將數(shù)據(jù)臨時存儲在排序目錄，如果指定的排序Cache無法滿足，會話會失敗，可以用文檔中提到公式計算Cache；3. 當(dāng)配置使用忽略比較,當(dāng)這個值之外所有比較值都相同則不更新Cache,NewLookUpRow=0當(dāng)其它比較值還有不相同時則更新Cache. NewLookUpRow=,1 or 215. Output Old Value On Update:當(dāng)更新的時候不會更新新值到Cache,全部以Cache里面的值輸出,16. 更多LKP屬性可見 1. Aggregator可用于聚合統(tǒng)計，和SQL語句不同的是，可以針對不同的計算指定不同的條件，并可輸出非Group By的欄位；2. 用于Group By的端口可以是輸入的， 輸入輸出的，輸出的或者變量端口，用到的輸出及變量端口中不能含有統(tǒng)計函數(shù)；3. 統(tǒng)計端口可以包含統(tǒng)計函數(shù)（共有15個），可以進(jìn)行兩層嵌套，但要求所有的統(tǒng)計端口都進(jìn)行嵌套；4. 對于那些即非Group By又非統(tǒng)計的端口，返回最后一次收到的那一行；5. Sorted Input屬性表示輸入的數(shù)據(jù)已經(jīng)按Group By端口的要求排好了順，這樣能提高性能，輸入部分?jǐn)?shù)據(jù)就能有部分結(jié)果，源和目標(biāo)的組件能同時工作，在沒有選這個屬性的情況下，需要等到所有數(shù)據(jù)輸入完成才能開始有統(tǒng)計結(jié)果；注意：當(dāng)選擇Sorted Input屬性，但是輸入數(shù)據(jù)未排序時。 各Transformation的功能說明 Qualifier（數(shù)據(jù)源編輯,Relational）1. Source Qual
法律信息相關(guān)推薦
鄂ICP備17016276號-1