【正文】 ROM DS_JOBS WHERE NAME LIKE 39。%SAP%39。 方法三：進入存放JOB的位置，要產(chǎn)看某個project的JOB信息就進到相應(yīng)的project下面用dssh“SELECT * FROM DS_JOBS WHERE NAME=’ I_Tr_TRC_TI_TRC_ASC’”或者是uvsh “SELECT * FROM DS_JOBS WHERE NAME=’ I_Tr_TRC_TI_TRC_ASC’”都可以實現(xiàn)查詢。如下圖所示： Datastage和數(shù)據(jù)庫的連接方法Datastage和數(shù)據(jù)庫有兩種方法連接：一種是通過ODBC連接，另一種方法是通過客戶端連接。從后臺查看服務(wù)器配置了哪些db2客戶端用db2 list db directory 在datastage中使用環(huán)境變量的問題在datastage中如果用到了環(huán)境變量的話，那么這個環(huán)境變量一定也要在/$dshome/dsenv 中配置一下，然后重啟datastage服務(wù)器以后 才會生效！例如：在dsadm用戶下的 .profile 文件中配置了一個環(huán)境變量export ETLPATH=/SGMEDWETL/dsdata/projects那么同樣我們也要在/$dshome/dsenv 中配置一下export ETLPATH=/SGMEDWETL/dsdata/projects無論是在datastage 的routines 中用到這個環(huán)境變量還是用一個stage調(diào)用shell程序都要這樣做，只要是通過datastage 來用到這個環(huán)境變量，那么都要在兩個文件中配置！ IConv 和 OConvIConv 將一個字符型的日期轉(zhuǎn)換成一個國際數(shù)字，是天數(shù) ；OConv 將一個日期的‘天數(shù)’轉(zhuǎn)換成一個具有格式的字符串；例如：IConv（“12311967”，“DDMY[2,2,4]” ） 》0IConv（“12311967” ，“D4 DMY[2,2,4]”） 》0IConv（“123167” ，“D2MDY[2,2,2]”） 》0OConv（0，“DDMY[2,2,4]”）》“12311967”O(jiān)Conv（IConv（“12311967” ，“D4 DMY[2,2,4]”），”D/YDM[4,2,A10]“）》”1967/31/December 在Merge中使用特殊字符在語句中間要是需要加字符的話要用下面的方法：Merge into (SELECT \* FROM SCHEMA.TD_ASC_PART WHERE VALID=1 AND ASC_CODE39。\39。SGM\39。39。) 注意語句中的 39。\39。SGM\39。39。 本身應(yīng)該是‘SGM’注意：用來判斷是否匹配的字段值不能為NULL，如果有為NULL的可以用一下方法來替換一下：例如：若字段是字符形的：coalesce(,39。\39。1\39。39。)=coalesce(,39。\39。1\39。39。)若字段是數(shù)字形的：VALUS（,1）＝VALUS（,1）注釋: 如何把雙引號包含到echo命令的字符串中,引號是一個特殊字符,所以必須要使用反斜杠 \ 來使shell 忽略它的特殊含義!例如你希望輸出字符串: /dev/abc 那么只需要在引號前面加上反斜杠 \ 就可以了 echo \/dev/abc\ /dev/abc4 部分常用Stage 的使用說明Stage名稱說明Transformer對任何需要轉(zhuǎn)換的輸入的數(shù)據(jù)集合進行轉(zhuǎn)換,并將數(shù)據(jù)傳輸?shù)狡渌顒拥腟tage 中或一個將數(shù)據(jù)寫入數(shù)據(jù)庫或文件的Stage Sort用來并行執(zhí)行更復(fù)雜的排序操作 Merge將一個或多個排序的更新數(shù)據(jù)集合合并成一個排序的主數(shù)據(jù)集合 Join在一個或多個輸入數(shù)據(jù)集合上執(zhí)行連接操作并輸出一個結(jié)果數(shù)據(jù)集,連接操作支持:Inner, Left Outer, Right Outer 和 Full Outer Join Aggregator對于輸入的數(shù)據(jù)記錄進行分組并且計算每一組的合計和總計Lookup對多個表進行左外連接操作 Funnel把多個數(shù)據(jù)集合并成一個大的數(shù)據(jù)集,且表結(jié)構(gòu)要相同 Remove Duplicates刪除重復(fù)的記錄 Filter基于用戶指定的約束(“where 子句),將輸入數(shù)據(jù)轉(zhuǎn)換到不同的輸出數(shù)據(jù)集(Link),對于過濾記錄是非常有效的 Switch相當于C語言中Switch功能,通過selector來選定字段,case來指定值,最多128個output, 1個reject link Copy拷貝一個輸入數(shù)據(jù)集到多個輸出數(shù)據(jù)集。而且不需要修改 Change Capture抓取兩個輸入數(shù)據(jù)集，表現(xiàn)為前和后，并且獲取后面的數(shù)據(jù)路輸出一個記錄表現(xiàn)已經(jīng)改變的數(shù)據(jù)集. Pivot行列互換 Peek將記錄字段值顯示到作業(yè)日志或分開的output link,就象Copy Stage將輸入的數(shù)據(jù)拷貝到一個或多個輸出數(shù)據(jù)集.Surrogate_Key_Generator用于產(chǎn)生一個代理鍵 DB2IBM DB2 UDB 訪問l 從數(shù)據(jù)庫讀取數(shù)據(jù)或?qū)?shù)據(jù)寫入DB2數(shù)據(jù)庫l 順序執(zhí)行或并行執(zhí)行l(wèi) 支持DB2的HASH分區(qū)l 支持WRITE,UPSERT和LOAD的寫方法l 支持表,自動產(chǎn)生SQL和用戶定義SQL讀方法OracleOracle數(shù)據(jù)庫訪問l 從ORACLE數(shù)據(jù)庫讀取數(shù)據(jù)或?qū)?shù)據(jù)寫入數(shù)據(jù)庫l 順序執(zhí)行或并行執(zhí)行l(wèi) 支持LOAD和UPSERT寫方法l 支持TABLE和QUERY讀方法TeradataTeradata數(shù)據(jù)庫訪問l 從TERADATA數(shù)據(jù)庫讀取數(shù)據(jù)和將數(shù)據(jù)寫入數(shù)據(jù)庫l FastExport: Table, Autogenerated SQL, Usergenerater SQLl FastLoad: Create, Append, Replace, Truncatel 順序執(zhí)行和并行執(zhí)行l(wèi) , Informix XPSInformix XPS 數(shù)據(jù)庫訪問l 從INFORMIX XPS數(shù)據(jù)庫讀取數(shù)據(jù)或?qū)?shù)據(jù)寫入數(shù)據(jù)庫l 順序執(zhí)行或并行執(zhí)行ODBC使用ODBC 訪問數(shù)據(jù)庫5 dsjob 語法說明:登陸DataStage服務(wù)器,輸入:cd $DSHOME/bin。在輸入dsjob 回車,進入dsjob命令。Command Syntax: dsjob [file file server | [server server][user user][password password]] primary mand [arguments]Valid primary mand options are: run stop lprojects ljobs linvocations lstages llinks projectinfo jobinfo stageinfo linkinfo lparams paraminfo log logsum logdetail lognewest report jobid import命令命令說明語法run運行JOB,也可獲得JOBSTATUSdsjob –run project job|jobid dsjob –run –jobstatus project job|jobidstop停止JOB運行dsjob –stop project job|jobidlprojects顯示服務(wù)器上的所有工程名dsjob –lprojectsljobs顯示一個工程上的所有JOB名dsjob ljobs projectlstages顯示一個JOB中所有的stage名dsjob lstages [useid] project job|jobidllinks顯示一個stage中含有的LINK名dsjob llinks [useid] project job|jobid stageprojectinfo顯示一個工程的信息,包括服務(wù)器名,工程名dsjob projectinfo projectjobinfo顯示一個JOB的信息,包括Job Status, Job Start Time, Invocation List等dsjob jobinfo [useid] project job|jobidstageinfo顯示Stage 的信息,包括Stage Type, In Row Number, Stage Name等dsjob stageinfo [useid] project job|jobid stagelparams顯示一個JOB中的參數(shù)列表dsjob lparams [useid] project job|jobidparaminfo顯示參數(shù)的信息dsjob paraminfo [useid] project job|jobid paramlog向JOB日志中寫信息,可以寫一個INFO信息,或者一條WARNING信息dsjob log [info | warn] project joblognewest獲得最新的日志IDdsjob lognewest [useid] project job|jobid [event type]event type = INFO | WARNING | FATAL | REJECT | STARTED | RESET | BATCHlogdetail根據(jù)日志ID,來獲得日志的詳細信息dsjob logdetail [useid] project job|jobid first event id [last event id]report得到一個JOB最近的狀態(tài)報告信息,包括:JOB運行時間,結(jié)束時間,耗時,JOB中的STAGE,LINK信息等.dsjob report [useid] project job|jobid [report type]report type = BASIC | DETAIL | XMLimport向一個工程導(dǎo)入JOBdsjob import project DSXfile [ [OVERWRITE] JOB[S] | jobname ...] | [LIST]6 如何從DataStage服務(wù)器導(dǎo)出所開發(fā)的JOBS列表步驟如下：1. 登陸DataStage服務(wù)器,輸入登陸帳戶,進入系統(tǒng)。 2. 輸入命令: cd $DSHOME,進入DSEngine引擎。 3. 輸入cd bin,進入bin目錄 4. 輸入dsjob,進入dsjob命令幫助 5. 輸入dsjob ljobs SGMDM05 /SGMEDWETL/tmp/hf_jobs,把PROJECT為SGMDM05下的JOB放到目錄/SGMEDWETL/tmp下的hf_jobs文件里。 Status code = 0?表示導(dǎo)出成功輸入cd /SGMEDWETL/tmp,進入該目錄,用命令more hf_jobs,查看導(dǎo)出的JOBS 如果想把服務(wù)器的hf_jobs導(dǎo)到本地機器上,可以使用FTP到本地,也可以使用第三方工具如: filezilla. 7 查看當前服務(wù)器狀態(tài)信息的方法:1. cd $DSHOME/bin2. uv –admin –info 如下圖：8 如何在兩臺機器之間進行FTP文件 假設(shè)把機器167上的文件/SGMEDWETL/tmp/hf_jobs FTP 到機器33上. 1. 登陸到33機器, 輸入命令:ftp , 進入167機器,輸入167的登陸帳戶進入167系統(tǒng)。 2. 輸入type binary,設(shè)置傳輸時所用的字符集,binary表示二進制 3. 輸入命令:get /SGMEDWETL/tmp/hf_jobs /SGMEDWETL/tmp/hf_jobs_ftp, /SGMEDWETL/tmp/hf_jobs 表示remotefile。 /SGMEDWETL/tmp/hf_jobs_ftp 表示localfile 4. 輸入quit退出FTP. 9 如何獲得Jobstatus ,步驟如下:1. 登陸到DataStage 服務(wù)器,輸入命令: cd $DSHOME/bin 進入bin 目錄。 2. 輸入命令: dsjob –run。 10 dsjob –run 的用法dsjob run [mode NORMAL | RESET | VALIDATE] [param name=value] [warn n] [rows n] [wait] [opmetadata TR