chapter4-廈門大學(xué)-林子雨-大數(shù)據(jù)技術(shù)原理與應(yīng)用-第四章-分布式數(shù)據(jù)庫(kù)hbase41-資料下載頁
2025-02-18 03:23本頁面
【正文】 林子雨 HBase常用 Shell命令 put：向表、行、列指定的單元格添加數(shù)據(jù) scan：瀏覽表的相關(guān)信息 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase常用 Shell命令 get：通過表名、行、列、時(shí)間戳、時(shí)間范圍和版本號(hào)來獲得相應(yīng)單元格的值 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase常用 Shell命令 enable/disable：使表有效或無效 drop：刪除表 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase常用 Java API及應(yīng)用實(shí)例 Hbase常用 Java API （ 1） 該類用于管理 HBase數(shù)據(jù)庫(kù)的表信息，包括創(chuàng)建或刪除表、列出表項(xiàng)、使表有效或無效、添加或刪除表的列族成員、檢查 HBase的運(yùn)行狀態(tài)等 （ 2） 該類用于管理 HBase的配置信息 （ 3） 用于與 HBase進(jìn)行通信。如果多個(gè)線程對(duì)一個(gè) HTable對(duì)象進(jìn)行 put或者 delete操作的話，則寫緩沖器可能會(huì)崩潰 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase常用 Java API及應(yīng)用實(shí)例 （ 4） HTableDescriptor包含了 HBase中表格的詳細(xì)信息，例如表中的列族、該表的類型（ ROOT， .META.）、該表是否只讀、 MemStore的最大空間、Region什么時(shí)候應(yīng)該分裂等等 （ 5） HColumnDescriptor包含了列族的詳細(xì)信息，例如列族的版本號(hào)、壓縮設(shè)置等。HColumnDescriptor通常在添加列族或者創(chuàng)建表的時(shí)候使用。列族一旦建立就不能被修改，只能通過刪除列族，然后再創(chuàng)建新的列族來間接的修改列族。一旦列族被刪除了，該列族包含的數(shù)據(jù)也隨之被刪除 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase常用 Java API及應(yīng)用實(shí)例 （ 6） 用來對(duì)單元格執(zhí)行添加數(shù)據(jù)操作 （ 7） 用來獲取單行的信息 （ 8） 用于存放 Get或 Scan操作后的查詢結(jié)果，并以 key， value的格式存儲(chǔ)在map結(jié)構(gòu)中。該類不是線程安全的 （ 9） 客戶端獲取值的接口 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 本章小結(jié) ? 本章詳細(xì)介紹了 HBase數(shù)據(jù)庫(kù)的知識(shí)。 HBase數(shù)據(jù)庫(kù)是 BigTable的開源實(shí)現(xiàn)，和 BigTable一樣，支持大規(guī)模海量數(shù)據(jù)，分布式并發(fā)數(shù)據(jù)處理效率極高，易于擴(kuò)展且支持動(dòng)態(tài)伸縮，適用于廉價(jià)設(shè)備 ? HBase可以支持 Native Java API、 HBase Shell、 Thrift Gateway、 REST Gateway、 Pig、 Hive等多種訪問接口，可以根據(jù)具體應(yīng)用場(chǎng)合選擇相應(yīng)訪問方式 ? HBase實(shí)際上就是一個(gè)稀疏、多維、持久化存儲(chǔ)的映射表，它采用行鍵、列鍵和時(shí)間戳進(jìn)行索引，每個(gè)值都是未經(jīng)解釋的字符串。本章介紹了 HBase數(shù)據(jù)在概念視圖和物理視圖中的差別 ? HBase采用分區(qū)存儲(chǔ)，一個(gè)大的表會(huì)被分拆許多個(gè) Region，這些 Region會(huì)被分發(fā)到不同的服務(wù)器上實(shí)現(xiàn)分布式存儲(chǔ) ? HBase的系統(tǒng)架構(gòu)包括客戶端、 Zookeeper服務(wù)器、 Master主服務(wù)器、Region服務(wù)器。客戶端包含訪問 HBase的接口； Zookeeper服務(wù)器負(fù)責(zé)提供穩(wěn)定可靠的協(xié)同服務(wù)； Master主服務(wù)器主要負(fù)責(zé)表和 Region的管理工作；Region服務(wù)器負(fù)責(zé)維護(hù)分配給自己的 Region，并響應(yīng)用戶的讀寫請(qǐng)求 ? 本章最后詳細(xì)介紹了 HBase運(yùn)行機(jī)制和編程實(shí)踐的知識(shí) 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 主講教師和助教 主講教師：林子雨 單位：廈門大學(xué)計(jì)算機(jī)科學(xué)系數(shù)據(jù)庫(kù)實(shí)驗(yàn)室 2023級(jí)碩士研究生（導(dǎo)師：林子雨） Email: 助教：蔡珉星 歡迎訪問 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 ——概念、存儲(chǔ)、處理、分析與應(yīng)用 》 教材官方網(wǎng)站： 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 Department of Computer Science, Xiamen University, June, 2023 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 演講完畢，謝謝觀看！
規(guī)章制度相關(guān)推薦
鄂ICP備17016276號(hào)-1