大數據時代索引與數據庫技術的發(fā)展與創(chuàng)新55-資料下載頁
2025-02-06 19:20本頁面
【正文】 4） 數據分析 ? 大數據時代的數據分析需要滿足及時有效的要求，既要能處理高速的數據，又要能夠實現實時的分析。 ? 目前產生了一些新型的在線事務處理系統，如 NoSQL方案和 NewSQL方案。 ? NoSQL方案通過消除 SQL的語言查詢來實現性能的提高和擴展性的增加。有以下特征：不需要預定的模式；沒有共享架構；具有彈性可擴展性；可對數據進行分區(qū)處理；能夠異步復制等。常用的產品有 HBase、 MongoDB等。 ? NewSQL方案是既能保留 SQL查詢的方便性，又能提供高性能和高擴展性的新型數據分析工具，是一種新型的關系數據庫管理系統。常見的系統有 Google Spanner、 Clustrix、VoltDB等。 ? 對大數據進行處理，目前有兩大主流的方向：一個是 MPP數據庫（大規(guī)模并行數據庫）為首的并列關系數據庫方向，一個是以 MapReduce為首的分布式 NoSQL方向。 ? 除此之外，流數據管理也是大數據處理分析的一種解決方案。 ? 為了成功的實現對大數據的分析，還要建立具有敏捷的計算平臺，線性擴展能力，全方位、協作性用戶體驗的大數據分析平臺，還需要聚類分析等高級的分析理論和方法以及方便易用的數據可視化技術。 ? （ 5） 智能索引技術 ? 當前硬、軟件環(huán)境越來越好，從而為索引技術向智能化、多語種化、索引手段的自動化的方向發(fā)展提供了物質條件，使搜索引擎向高層次發(fā)展成為可能。目前在搜索引擎智能化、用戶接口的多語種化、索引手段的自動化等方面已取得了一定的成果。 ? 事業(yè)的發(fā)展與創(chuàng)新 ? 索引和數據庫事業(yè)的發(fā)展和創(chuàng)新，既離不開技術的發(fā)展，又需要理念的轉變，方式的創(chuàng)新和人才的培養(yǎng)。 ? （ 1）技術的創(chuàng)新 ? 需要進一步滿足對容量大、種類多、變化快的數據進行及時有效分析的要求。進一步拓展對 NoSQL方案和 NewSQL方案的研究，以取得更好的效果。同時在大數據存儲、管理、分析的方面需要革命性的理論和新算法的出現，需要新的兼?zhèn)浯笠?guī)模并行處理數據庫的高效率同時又具有Hadoop平臺的高擴展性特點的系統的出現。 ? （ 2）理念的轉變 ? 主要是對索引和數據庫的理論進行更新，服務提供方式進行創(chuàng)新，以實現商業(yè)價值。不能只滿足于傳統的理論，要對已有的理論進行創(chuàng)新，需要對大數據中蘊含的價值進行深入的挖掘，積極主動的提供給需要數據的對象，積極主動的去創(chuàng)造商機。 ? （ 3）方式的創(chuàng)新 ? 是指如何滿足人們的小型化、便捷化的需要，如何實現商機的主動獲取和推介。隨著智能設備的普及，人們使用的移動終端越來越小型化，便捷化，索引和數據庫的服務提供要重視這些終端，要開放接口，使用云技術，極大的改進移動終端上的用戶體驗。 ? （ 4）人才的培養(yǎng) ? 一方面是加強對傳統的索引和數據庫專業(yè)的人才的教育和培養(yǎng)，更重要的是適應大數據的要求，重視對數據科學和數據研究人員的教育和培養(yǎng)。數據研究人員應該是具有良好視野的復合型人才，既有堅實的技術基礎，又有廣泛的業(yè)務知識和經驗，從而能夠熟練的使用各種大數據工具，分析并制定出各種策略和計劃。 ? （ 5）國家的支持 ? 政府相關部門也要從整體規(guī)劃、配套建設、權益保護等方面出發(fā)，支持索引和數據庫事業(yè)的創(chuàng)新和發(fā)展。 ? 各高校和科研院所也應該對此加大投入的力度，探索有益的成果。 ? 大數據時代的到來，給索引和數據庫事業(yè)帶來了巨大的沖擊，提出了新的要求。面對挑戰(zhàn)，索引和數據庫事業(yè)的經過發(fā)展與創(chuàng)新，必然會給用戶提供更高水平的服務。 索引和數據庫事業(yè)的發(fā)展也會推向一個新階段 。 演講完畢，謝謝觀看！
教學課件相關推薦
鄂ICP備17016276號-1