sybase數(shù)據(jù)倉庫解決方案(編輯修改稿)
2025-01-26 20:06 本頁面
【文章內容簡介】 特殊的索引技術，并行查詢可伸縮性 GB 到 TB 級易于管理 方便，靈活， GUI存取訪問 數(shù)據(jù)隨時可用數(shù)據(jù)管理解決的方案通用的關系數(shù)據(jù)庫系統(tǒng)專門的數(shù)據(jù)倉庫服務器Sybase IQ專門為數(shù)據(jù)倉庫 /數(shù)據(jù)集市設計的關系型數(shù)據(jù)庫專門針對 OLAP/DSS而優(yōu)化的索引和查詢處理技術Adaptive Server IQ數(shù)據(jù)存儲： Adaptive Server IQl 無處不索引 (Index EVERYWHERE)l 數(shù)據(jù)壓縮 (通常達到原始數(shù)據(jù)的 70 75%)l 垂直存儲技術 (Vertical Partitioning)l 專利的 Bit Wise索引技術跨越 Bitmap的限制l 多種索引類型： FP,LF,HNG,HGl 低級數(shù)的限制從 100擴充到 1000l 預連接的索引提供額外的顯著提高性能手段 (Join Index)l 支持任意設計模式l 星型、雪花、雪暴、星座模式l 普通關系模式l 支持任意加載方式l 文件、內部數(shù)據(jù)、外部數(shù)據(jù)庫直接加載l 開放的接口計算 “NY”州A類商店的平均銷售額當表的記錄數(shù)從幾萬條變?yōu)榍f和上億條時，傳統(tǒng) RDBMS技術面對的問題 :u表掃描的性能極端低下u冗余設計代價高昂、查詢讀取的無效字段過多u低級數(shù)類型數(shù)據(jù)上索引的失效u普通索引加載和空間代價，造成不能任意建造u即席查詢的 SQL順序對性能有顯著影響u數(shù)值型比較和運算，無恰當手段加速處理傳統(tǒng) RDBMS不適合數(shù)據(jù)倉庫IQ的特殊存儲方式 垂直存儲（按列存儲）Sybase IQ: 數(shù)據(jù)是按列存儲的，而不是按行存儲好處 : l 只存取查詢所需的數(shù)據(jù)l 數(shù)據(jù)類型是一致的，因而可以很容易被壓縮l 數(shù)據(jù)庫易于修改和管理Sybase IQ: 只讀完成查詢所 涉及到的列計算在紐約的 “A”類商店的平均銷售額好處 : 無須使用其他的技術，Sybase IQ 就可以減少I/O 超過 90%IQ的特殊存儲方式 垂直存儲（按列存儲）“How many MALES are NOT INSURED in CALIFORNIA?GenderMMFMM800 Bytes/Row10MROWSStateNYCACTMACARDBMSInsuredYYNYNM Y CAM N CAF Y NYM N CA1243Gender Insured State+ +11011101010110MBits10M Bits x 3 col / 816K Page = 235 I/Os800 Bytes x 10M 16K Page = 500,000 I/Osn 基本上只能使用表掃描n 查詢過程讀取了太多的無效數(shù)據(jù)IQExample: I/O 的明顯減少IQ的索引特點索引即是數(shù)據(jù)沒有索引和數(shù)據(jù)的分別任何一列可以建立多個索引系統(tǒng)保證至少會存在一個索引（ FP）索引的選擇和設計主要基于：數(shù)據(jù)的級數(shù)（離散值的個數(shù)）在查詢中的使用方式和 SQL語句的順序無關索引的種類Fast Projection(FP)數(shù)據(jù)壓縮存儲根據(jù)數(shù)據(jù)的特點會自動使用三種方式中的一種Low Fast (LF)Bit map 索引High Non Group (HNG)Bitwise 索引High Group (HG)GArray (包括一個改進的 Btree)FP Index – normal FPl 級數(shù)（取值個數(shù)） 65536l 數(shù)據(jù)被壓縮存儲ColorRedBlueGreenRedFP Index FFPl 級數(shù) 256l 內建一個 1byte的參照表Data ValuesRedBlueGreenRedColorRedBlueGreen12311123332Lookup Table DataLF Indexl 傳統(tǒng)的 Bit Map 索引l 級數(shù)小于 1000 l 可以唯一l 使用的可能性l Joinsl Group byl MIN, MAX, SUM, AVG functionsl Where clause predicateslEquality / Inequality, Ranges, IN lists...?冗
環(huán)評公示相關推薦
鄂ICP備17016276號-1