chapter4-廈門大學(xué)-林子雨-大數(shù)據(jù)技術(shù)原理與應(yīng)用-第四章-分布式數(shù)據(jù)庫(kù)hbase41-全文預(yù)覽
【正文】 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase編程實(shí)踐 本節(jié)主要介紹 Linux中關(guān)于 HBase數(shù)據(jù)庫(kù)的常用 Shell命令 ， 以及數(shù)據(jù)處理常用的 Java API HBase常用 Shell命令 HBase常用 Java API及應(yīng)用實(shí)例 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase常用 Shell命令 create：創(chuàng)建表 list：列出 HBase中所有的表信息 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase常用 Shell命令 put：向表、行、列指定的單元格添加數(shù)據(jù) scan：瀏覽表的相關(guān)信息 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase常用 Shell命令 get：通過(guò)表名、行、列、時(shí)間戳、時(shí)間范圍和版本號(hào)來(lái)獲得相應(yīng)單元格的值 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase常用 Shell命令 enable/disable：使表有效或無(wú)效 drop：刪除表 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase常用 Java API及應(yīng)用實(shí)例 Hbase常用 Java API （ 1） 該類用于管理 HBase數(shù)據(jù)庫(kù)的表信息，包括創(chuàng)建或刪除表、列出表項(xiàng)、使表有效或無(wú)效、添加或刪除表的列族成員、檢查 HBase的運(yùn)行狀態(tài)等 （ 2） 該類用于管理 HBase的配置信息 （ 3） 用于與 HBase進(jìn)行通信。一旦列族被刪除了，該列族包含的數(shù)據(jù)也隨之被刪除 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase常用 Java API及應(yīng)用實(shí)例 （ 6） 用來(lái)對(duì)單元格執(zhí)行添加數(shù)據(jù)操作 （ 7） 用來(lái)獲取單行的信息 （ 8） 用于存放 Get或 Scan操作后的查詢結(jié)果，并以 key， value的格式存儲(chǔ)在map結(jié)構(gòu)中?？蛻舳税L問(wèn) HBase的接口； Zookeeper服務(wù)器負(fù)責(zé)提供穩(wěn)定可靠的協(xié)同服務(wù)； Master主服務(wù)器主要負(fù)責(zé)表和 Region的管理工作；Region服務(wù)器負(fù)責(zé)維護(hù)分配給自己的 Region，并響應(yīng)用戶的讀寫請(qǐng)求 ? 本章最后詳細(xì)介紹了 HBase運(yùn)行機(jī)制和編程實(shí)踐的知識(shí) 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 主講教師和助教 主講教師：林子雨 單位：廈門大學(xué)計(jì)算機(jī)科學(xué)系數(shù)據(jù)庫(kù)實(shí)驗(yàn)室 2023級(jí)碩士研究生（導(dǎo)師：林子雨） Email: 助教：蔡珉星 歡迎訪問(wèn) 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 ——概念、存儲(chǔ)、處理、分析與應(yīng)用 》 教材官方網(wǎng)站： 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 Department of Computer Science, Xiamen University, June, 2023 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 演講完畢，謝謝觀看！ 。 HBase數(shù)據(jù)庫(kù)是 BigTable的開源實(shí)現(xiàn)，和 BigTable一樣，支持大規(guī)模海量數(shù)據(jù)，分布式并發(fā)數(shù)據(jù)處理效率極高，易于擴(kuò)展且支持動(dòng)態(tài)伸縮，適用于廉價(jià)設(shè)備 ? HBase可以支持 Native Java API、 HBase Shell、 Thrift Gateway、 REST Gateway、 Pig、 Hive等多種訪問(wèn)接口，可以根據(jù)具體應(yīng)用場(chǎng)合選擇相應(yīng)訪問(wèn)方式 ? HBase實(shí)際上就是一個(gè)稀疏、多維、持久化存儲(chǔ)的映射表，它采用行鍵、列鍵和時(shí)間戳進(jìn)行索引，每個(gè)值都是未經(jīng)解釋的字符串。HColumnDescriptor通常在添加列族或者創(chuàng)建表的時(shí)候使用。相反， HBase和 BigTable這些分布式數(shù)據(jù)庫(kù)就是為了實(shí)現(xiàn)靈活的水平擴(kuò)展而開發(fā)的，能夠輕易地通過(guò)在集群中增加或者減少硬件數(shù)量來(lái)實(shí)現(xiàn)性能的伸縮 《 大數(shù)據(jù)技術(shù)原理與應(yīng)用 》 廈門大學(xué)計(jì)算機(jī)科學(xué)系 林子雨 HBase訪問(wèn)接口 表 42 HBase訪問(wèn)接口 類型 特點(diǎn) 場(chǎng)合 Native Java API 最常規(guī)和高效的訪問(wèn)方式 適合 Hadoop MapReduce作業(yè)并行批處理 HBase表數(shù)據(jù) HBase Shell HBase的命令行工具
規(guī)章制度相關(guān)推薦
鄂ICP備17016276號(hào)-1