湖南聯(lián)通經(jīng)營分析系統(tǒng)講稿-文庫吧
2025-01-08 14:13 本頁面
【正文】 作系統(tǒng)? 特定配置的數(shù)據(jù)庫系統(tǒng)? 其配置中任何一項的變化都可能會對 TPMC值有很大的影響? TPCH– 針對決策支持系統(tǒng)中的即席查詢，應(yīng)當采用 TPC－ H（每小時處理的性能）作為衡量主機處理能力的指標。這種指標處理是面向大量的即席查詢和并發(fā)的數(shù)據(jù)修改操作。這種處理用戶往往不知道要查詢什么數(shù)據(jù)，不能對預見的數(shù)據(jù)進行優(yōu)化工作。? TPCR– 它也是以每小時處理能力為計量單位的。這種指標是在用戶知道要查詢什么數(shù)據(jù)，并可以對可相應(yīng)的數(shù)據(jù)表進行優(yōu)化。 2023/5/5 15ODS/DW/ETL 服務(wù)器性能分析? 以詳細話單匯總和分析為例來分析主機的性能。? 估算條件： (可以根據(jù)實際情況進行修改 )– 總用戶數(shù)按 250萬計算– 每天每用戶按 5個話單? 分析過程：– 每分鐘處理： （用戶數(shù)） 250萬 *5/24/60≈8681– 峰值處理： 8681*2= 17362– 需執(zhí)行約 8個 SQL語句，則估算一個話單匯總處理業(yè)務(wù)相當?shù)?TPCC值為：? 8*=TPCC– 話單匯總和分析，的 TPCC值要求滿足：? 17362* ≈ 15626– 假設(shè)其他經(jīng)營分析的 TPCC總和與話單分析的 TPCC相等。? 15626*2=31252– 考慮 25%的冗余（系統(tǒng)其它開銷）：? 主機性能 =31252*=39065? 支持到 2023年底的主機性能的 TPCC值約為 39065ODS/ETL服務(wù)器完成的功能： ODS地抽取、清潔、轉(zhuǎn)換和裝載 ODS到 DW地抽取、清潔、轉(zhuǎn)換和裝載 ODS中保存接近當前業(yè)務(wù)的數(shù)據(jù) 根據(jù) TPCC的標準：tpmC值是根據(jù)標準模型中 NewOrder事務(wù)的處理數(shù)目來計算的一個 NewOrder事務(wù)由平均 45個 SQL語句處理完成整個測試的執(zhí)行過程中， NewOrder處理占 45%。2023/5/5 16報表 /OLAP/WEB 服務(wù)器性能分析? DW/OLAP/WEB服務(wù)器主要完成的功能：– 1．數(shù)據(jù)倉庫的數(shù)據(jù)存儲– 2．對數(shù)據(jù)進行 OLAP分析– 3．提供用戶的連接– 4．提供 WEB展現(xiàn)功能? 從功能上分析，該服務(wù)器既有 OLAP處理，又有 OLTP的處理。是兩種應(yīng)用的結(jié)合，因此，在性能的分析上，我們要進行了綜合考慮。 OLAP分析的時長是與數(shù)據(jù)量有一定的關(guān)系的，也就是數(shù)據(jù)量的增加，相應(yīng)的分析時長也會增加。 OLAP數(shù)據(jù)模型的生成要對數(shù)據(jù)庫進行 OLTP處理，所以該服務(wù)器的性能應(yīng)大于或等于 ODS/ETL服務(wù)器的 TPCC值。2023/5/5 17系統(tǒng)存儲容量要求? 系統(tǒng)存儲容量? 系統(tǒng)目前建設(shè)的存儲容量應(yīng)先考慮到 2023年底，到 2023年底，聯(lián)通全部業(yè)務(wù)的用戶數(shù)估計達到 250萬，以此計算 ODS/DW數(shù)據(jù)庫的存儲容量為 TB? 系統(tǒng)使用兩臺小型機采用雙機群集方式運行，充分利用公司現(xiàn)有營帳的 EMC8430，相應(yīng)擴展其存儲容量。2023/5/5 18ODS存儲容量的估算估算條件：用戶數(shù) (萬 )： 250萬存儲時間（月）： 6月調(diào)整因子： 注：該用戶數(shù)為聯(lián)通全部業(yè)務(wù)（ GSM,CDMA,193,165,固定網(wǎng)等）以 GSM為準折合的用戶數(shù)。序號 項目存儲單位（字節(jié)）存儲期限（月）平均使用次數(shù)（天）平均包含子項 計算公式 結(jié)果 (G)A 話單存儲 200 6 5存儲單位 *平均使用次數(shù) *30*存儲期限 B增值業(yè)務(wù)話單存儲 60 6 4存儲單位 *平均使用次數(shù) *30*存儲期限 C 月帳單存儲 42 6 每月一次 6 存儲單位 *平均包含子項 *存儲期限 D用戶資料存儲 105 存儲單位 *用戶數(shù) E用戶資料變更存儲 6 用戶資料存儲 *10%*6 F用戶服務(wù)使用存儲 41 9存儲單位 *平均包含子項 *用戶數(shù) G用戶服務(wù)變更存儲 6用戶服務(wù)使用存儲*10%*6 總計 (A+B+C+D+E+F+G)*(1+調(diào)整因子 ) 2023/5/5 19數(shù)據(jù)倉庫存儲容量估算二 、數(shù)據(jù)倉庫存儲容量估算：計算公式： (XY)Z*(Z*ZB+XYB)*T*WZ*S*SE公式因子解釋 平均取值X是平均維數(shù)： 4Y是平均層次數(shù)： 3Z是平均分類： 4T是存儲期限（年）： 2XYB 是維度量字節(jié)數(shù) 30ZB 是層次及分類度量字節(jié)數(shù) 5W是維的有效壓縮比 S是主題個數(shù) 15SE是業(yè)務(wù)個數(shù) 6數(shù)據(jù)倉庫容量 (G)= 13142023/5/5 20整個數(shù)據(jù)倉庫的容量三、 整個數(shù)據(jù)倉庫的容量： ODS容量 +數(shù)據(jù)倉庫容量 (G)=+1314=系統(tǒng)因子系數(shù)：操作系統(tǒng)和數(shù)據(jù)庫本身工作空間（需要考慮系統(tǒng)緩沖區(qū)、工作空間、索引、臨時表等因素）RAID5因子系數(shù) 系統(tǒng)的存儲容量 (G)=整個數(shù)據(jù)倉庫容量 *（ 1+系統(tǒng)因子系數(shù)） *RAID5因子數(shù) = T系統(tǒng)的物理磁盤存儲容量：2023/5/5 21系統(tǒng)總體處理流程 數(shù)據(jù)格式檢查數(shù)據(jù)系統(tǒng)管
教學課件相關(guān)推薦
鄂ICP備17016276號-1