阿里hbase業(yè)務(wù)設(shè)計(jì)實(shí)踐(已修改)
2025-03-15 20:20 本頁(yè)面
【正文】 阿里業(yè)務(wù)設(shè)計(jì)實(shí)踐 穆公 (朱金清 ) 微博：淘穆公 大綱 ? 簡(jiǎn)介 ? 數(shù)據(jù)模型 ? 業(yè)務(wù)設(shè)計(jì) ? 產(chǎn)品線使用建議 ? 監(jiān)控 ? 總結(jié) 簡(jiǎn)介 ? : ? ? (. ) / ? ? ? ? ? ? 三層索引結(jié)構(gòu) ? 的大小默認(rèn)最大是 256M ? 按照平均 128M算； 假設(shè)：一個(gè) 1 ： 128128*1024 即 2^7 * 2^10 = 2^17 ： (2^17)^2 = 2 ^34 記錄數(shù)： 2^51 條記錄 其它特征 ? 三層樹的擴(kuò)展 [1] ? 適合于范圍查詢 ? 的字母順序來(lái)排序 (數(shù)組存儲(chǔ) ) ? ? 事務(wù)級(jí)別僅限于級(jí)別 ? 的自動(dòng) ? 問題：犧牲了中的？ ? [1] , 10 , 1987 , 395398. 已有適合的使用場(chǎng)景 ? 海量數(shù)據(jù)寫入 ? 歷史數(shù)據(jù) 批量寫入 ? 消息類（類似的） ? 消息類 ? ? 業(yè)務(wù)監(jiān)控 ? 類的業(yè)務(wù) ? 全網(wǎng)日志 全網(wǎng)每天上百億 ? 大表的復(fù)雜 /多維度索引 ? 檢索索引，主數(shù)據(jù)在 ? 分析類 ? 大批量讀取 ? 緩存 現(xiàn)有集群狀況 集群名稱 () () 高 版本 業(yè)務(wù) 7k 業(yè)務(wù) 2w 業(yè)務(wù) 7k 3w 2w 5w 業(yè)務(wù) 1k 2k 2k 6k 業(yè)務(wù) 5w 2w 6w 業(yè)務(wù) 10w 25w(最高50w) 1w 2w 業(yè)務(wù) 4w 20w (壓測(cè) ) 2k 3w(壓測(cè) ) 業(yè)務(wù) 每天 23 在級(jí)別 定制版 業(yè)務(wù) 10w 25w 15w 100w 業(yè)務(wù) 3k 3k 6k 業(yè)務(wù) 2w 6k 8k 與的對(duì)比 場(chǎng)景 優(yōu)點(diǎn) 缺點(diǎn) 優(yōu)點(diǎn) 缺點(diǎn) 業(yè)務(wù)表使用 使用簡(jiǎn)單，一張表即可 不過(guò)沒有 有；分庫(kù)分表，靈活 分庫(kù)后 更新模式 插入多的適合 差 二級(jí)索引策略 需借助索引表 強(qiáng) 問題 客戶端接口 靈活自己掌握 無(wú)標(biāo)準(zhǔn) 寫性能 非常強(qiáng) 順序?qū)懭霑r(shí)瓶頸在一臺(tái) 較強(qiáng) 幾千單套庫(kù) 讀性能 較強(qiáng)；支持 依賴內(nèi)存 很強(qiáng)；支持 依賴索引 可擴(kuò)展性 強(qiáng) 借助愚公工具可動(dòng)態(tài)擴(kuò)展 弱 運(yùn)維方便 自己定制 不夠成熟 成熟 時(shí)間短； 92版本可以在線 若有索引表，需要自己填充 即可 時(shí)間長(zhǎng)； 讀寫 穩(wěn)定性 A C 使用情況 ? () 大綱 ? 簡(jiǎn)介 ? 數(shù)據(jù)模型 ? 業(yè)務(wù)設(shè)計(jì) ? 產(chǎn)品線使用建議 ? 監(jiān)控 ? 總結(jié) Store memStore StoreFile StoreFile … … … … … … … 架構(gòu)圖 客戶端 C0樹 同一機(jī)器，目的？ C1樹 Q 寫成功立即返回 讀、 數(shù)據(jù)模型
環(huán)評(píng)公示相關(guān)推薦
鄂ICP備17016276號(hào)-1