大數(shù)據(jù)時(shí)代索引與數(shù)據(jù)庫事業(yè)的發(fā)展與創(chuàng)新-資料下載頁
2025-02-06 19:19本頁面
【正文】 4） 數(shù)據(jù)分析 ? 大數(shù)據(jù)時(shí)代的數(shù)據(jù)分析需要滿足及時(shí)有效的要求，既要能處理高速的數(shù)據(jù)，又要能夠?qū)崿F(xiàn)實(shí)時(shí)的分析。 ? 目前產(chǎn)生了一些新型的在線事務(wù)處理系統(tǒng)，如 NoSQL方案和 NewSQL方案。 ? NoSQL方案通過消除 SQL的語言查詢來實(shí)現(xiàn)性能的提高和擴(kuò)展性的增加。有以下特征：不需要預(yù)定的模式；沒有共享架構(gòu)；具有彈性可擴(kuò)展性；可對(duì)數(shù)據(jù)進(jìn)行分區(qū)處理；能夠異步復(fù)制等。常用的產(chǎn)品有 HBase、 MongoDB等。 ? NewSQL方案是既能保留 SQL查詢的方便性，又能提供高性能和高擴(kuò)展性的新型數(shù)據(jù)分析工具，是一種新型的關(guān)系數(shù)據(jù)庫管理系統(tǒng)。常見的系統(tǒng)有 Google Spanner、 Clustrix、VoltDB等。 ? 對(duì)大數(shù)據(jù)進(jìn)行處理，目前有兩大主流的方向：一個(gè)是 MPP數(shù)據(jù)庫（大規(guī)模并行數(shù)據(jù)庫）為首的并列關(guān)系數(shù)據(jù)庫方向，一個(gè)是以 MapReduce為首的分布式 NoSQL方向。 ? 除此之外，流數(shù)據(jù)管理也是大數(shù)據(jù)處理分析的一種解決方案。 ? 為了成功的實(shí)現(xiàn)對(duì)大數(shù)據(jù)的分析，還要建立具有敏捷的計(jì)算平臺(tái)，線性擴(kuò)展能力，全方位、協(xié)作性用戶體驗(yàn)的大數(shù)據(jù)分析平臺(tái)，還需要聚類分析等高級(jí)的分析理論和方法以及方便易用的數(shù)據(jù)可視化技術(shù)。 ? （ 5） 智能索引技術(shù) ? 當(dāng)前硬、軟件環(huán)境越來越好，從而為索引技術(shù)向智能化、多語種化、索引手段的自動(dòng)化的方向發(fā)展提供了物質(zhì)條件，使搜索引擎向高層次發(fā)展成為可能。目前在搜索引擎智能化、用戶接口的多語種化、索引手段的自動(dòng)化等方面已取得了一定的成果。 ? 事業(yè)的發(fā)展與創(chuàng)新 ? 索引和數(shù)據(jù)庫事業(yè)的發(fā)展和創(chuàng)新，既離不開技術(shù)的發(fā)展，又需要理念的轉(zhuǎn)變，方式的創(chuàng)新和人才的培養(yǎng)。 ? （ 1）技術(shù)的創(chuàng)新 ? 需要進(jìn)一步滿足對(duì)容量大、種類多、變化快的數(shù)據(jù)進(jìn)行及時(shí)有效分析的要求。進(jìn)一步拓展對(duì) NoSQL方案和 NewSQL方案的研究，以取得更好的效果。同時(shí)在大數(shù)據(jù)存儲(chǔ)、管理、分析的方面需要革命性的理論和新算法的出現(xiàn)，需要新的兼?zhèn)浯笠?guī)模并行處理數(shù)據(jù)庫的高效率同時(shí)又具有Hadoop平臺(tái)的高擴(kuò)展性特點(diǎn)的系統(tǒng)的出現(xiàn)。 ? （ 2）理念的轉(zhuǎn)變 ? 主要是對(duì)索引和數(shù)據(jù)庫的理論進(jìn)行更新，服務(wù)提供方式進(jìn)行創(chuàng)新，以實(shí)現(xiàn)商業(yè)價(jià)值。不能只滿足于傳統(tǒng)的理論，要對(duì)已有的理論進(jìn)行創(chuàng)新，需要對(duì)大數(shù)據(jù)中蘊(yùn)含的價(jià)值進(jìn)行深入的挖掘，積極主動(dòng)的提供給需要數(shù)據(jù)的對(duì)象，積極主動(dòng)的去創(chuàng)造商機(jī)。 ? （ 3）方式的創(chuàng)新 ? 是指如何滿足人們的小型化、便捷化的需要，如何實(shí)現(xiàn)商機(jī)的主動(dòng)獲取和推介。隨著智能設(shè)備的普及，人們使用的移動(dòng)終端越來越小型化，便捷化，索引和數(shù)據(jù)庫的服務(wù)提供要重視這些終端，要開放接口，使用云技術(shù)，極大的改進(jìn)移動(dòng)終端上的用戶體驗(yàn)。 ? （ 4）人才的培養(yǎng) ? 一方面是加強(qiáng)對(duì)傳統(tǒng)的索引和數(shù)據(jù)庫專業(yè)的人才的教育和培養(yǎng)，更重要的是適應(yīng)大數(shù)據(jù)的要求，重視對(duì)數(shù)據(jù)科學(xué)和數(shù)據(jù)研究人員的教育和培養(yǎng)。數(shù)據(jù)研究人員應(yīng)該是具有良好視野的復(fù)合型人才，既有堅(jiān)實(shí)的技術(shù)基礎(chǔ)，又有廣泛的業(yè)務(wù)知識(shí)和經(jīng)驗(yàn)，從而能夠熟練的使用各種大數(shù)據(jù)工具，分析并制定出各種策略和計(jì)劃。 ? （ 5）國(guó)家的支持 ? 政府相關(guān)部門也要從整體規(guī)劃、配套建設(shè)、權(quán)益保護(hù)等方面出發(fā)，支持索引和數(shù)據(jù)庫事業(yè)的創(chuàng)新和發(fā)展。 ? 各高校和科研院所也應(yīng)該對(duì)此加大投入的力度，探索有益的成果。 ? 大數(shù)據(jù)時(shí)代的到來，給索引和數(shù)據(jù)庫事業(yè)帶來了巨大的沖擊，提出了新的要求。面對(duì)挑戰(zhàn)，索引和數(shù)據(jù)庫事業(yè)的經(jīng)過發(fā)展與創(chuàng)新，必然會(huì)給用戶提供更高水平的服務(wù)。 索引和數(shù)據(jù)庫事業(yè)的發(fā)展也會(huì)推向一個(gè)新階段 。 演講完畢，謝謝觀看！
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號(hào)-1