大數(shù)據(jù)時代索引與數(shù)據(jù)庫事業(yè)的發(fā)展與創(chuàng)新-資料下載頁
2024-10-19 21:03本頁面
【導(dǎo)讀】“大數(shù)據(jù)”已經(jīng)在全球引起了廣。泛關(guān)注，正在引領(lǐng)了又一輪數(shù)據(jù)技術(shù)的革命。美國EMC公司于2020年5月在美國拉斯維加斯舉。業(yè)利用IT變革的重要趨勢。此次大會以“云計。主題，著重展現(xiàn)當(dāng)今兩個最重要的技術(shù)趨勢，正式提出了“大數(shù)據(jù)”概念。根據(jù)IDC《數(shù)字世界》研究項目在。如果保持這種爆炸式的增長速。個人擁有超過5200GB的數(shù)據(jù)。我們已進(jìn)入了大數(shù)據(jù)時代。在2020年12月，我國工信部發(fā)布了物聯(lián)網(wǎng)?！笆濉币?guī)劃，提出了4項關(guān)鍵技術(shù)創(chuàng)新工程。技術(shù)，這些也都與“大數(shù)據(jù)”密切相關(guān)。也對大數(shù)據(jù)技術(shù)給予了足夠的重視。來，已經(jīng)對我們的社會產(chǎn)生了重大影響。大數(shù)據(jù)的定義和特征。許多權(quán)威機構(gòu)和企業(yè)對大數(shù)據(jù)給予了不同的定。麥肯錫認(rèn)為，“大數(shù)據(jù)所涉及的數(shù)據(jù)集規(guī)模已。IDC公司認(rèn)為，“大數(shù)據(jù)不是一個事物，而是一。據(jù)進(jìn)行有效的信息治理。大數(shù)據(jù)在結(jié)構(gòu)類型上也有其特點：大多數(shù)的大。根據(jù)目前大數(shù)據(jù)的發(fā)展?fàn)顩r，未來數(shù)據(jù)增長的。大數(shù)據(jù)時代的到來奠定了堅實的技術(shù)基礎(chǔ)。
【正文】 臨的挑戰(zhàn)及創(chuàng)新 45 ?NoSQL方案通過消除 SQL的語言查詢來實現(xiàn)性能的提高和擴(kuò)展性的增加。有以下特征：不需要預(yù)定的模式；沒有共享架構(gòu)；具有彈性可擴(kuò)展性；可對數(shù)據(jù)進(jìn)行分區(qū)處理；能夠異步復(fù)制等。常用的產(chǎn)品有 HBase、 MongoDB等。 ?NewSQL方案是既能保留 SQL查詢的方便性，又能提供高性能和高擴(kuò)展性的新型數(shù)據(jù)分析工具，是一種新型的關(guān)系數(shù)據(jù)庫管理系統(tǒng)。常見的系統(tǒng)有 Google Spanner、 Clustrix、 VoltDB等。 RCCSE 中國科學(xué)評價研究中心 4 大數(shù)據(jù)時代索引與數(shù)據(jù)庫 事業(yè)面臨的挑戰(zhàn)及創(chuàng)新 46 ? 對大數(shù)據(jù)進(jìn)行處理，目前有兩大主流的方向：一個是 MPP數(shù)據(jù)庫（大規(guī)模并行數(shù)據(jù)庫）為首的并列關(guān)系數(shù)據(jù)庫方向，一個是以 MapReduce為首的分布式 NoSQL方向。 ? 除此之外，流數(shù)據(jù)管理也是大數(shù)據(jù)處理分析的一種解決方案。 RCCSE 中國科學(xué)評價研究中心 4 大數(shù)據(jù)時代索引與數(shù)據(jù)庫 事業(yè)面臨的挑戰(zhàn)及創(chuàng)新 47 ? 為了成功的實現(xiàn)對大數(shù)據(jù)的分析，還要建立具有敏捷的計算平臺，線性擴(kuò)展能力，全方位、協(xié)作性用戶體驗的大數(shù)據(jù)分析平臺，還需要聚類分析等高級的分析理論和方法以及方便易用的數(shù)據(jù)可視化技術(shù)。 RCCSE 中國科學(xué)評價研究中心 4 大數(shù)據(jù)時代索引與數(shù)據(jù)庫 事業(yè)面臨的挑戰(zhàn)及創(chuàng)新 48 ? （ 5） 智能索引技術(shù) ? 當(dāng)前硬、軟件環(huán)境越來越好，從而為索引技術(shù)向智能化、多語種化、索引手段的自動化的方向發(fā)展提供了物質(zhì)條件，使搜索引擎向高層次發(fā)展成為可能。目前在搜索引擎智能化、用戶接口的多語種化、索引手段的自動化等方面已取得了一定的成果。 RCCSE 中國科學(xué)評價研究中心 4 大數(shù)據(jù)時代索引與數(shù)據(jù)庫 事業(yè)面臨的挑戰(zhàn)及創(chuàng)新 49 ? 事業(yè)的發(fā)展與創(chuàng)新 ? 索引和數(shù)據(jù)庫事業(yè)的發(fā)展和創(chuàng)新，既離不開技術(shù)的發(fā)展，又需要理念的轉(zhuǎn)變，方式的創(chuàng)新和人才的培養(yǎng)。 RCCSE 中國科學(xué)評價研究中心 4 大數(shù)據(jù)時代索引與數(shù)據(jù)庫 事業(yè)面臨的挑戰(zhàn)及創(chuàng)新 50 ? （ 1）技術(shù)的創(chuàng)新 ? 需要進(jìn)一步滿足對容量大、種類多、變化快的數(shù)據(jù)進(jìn)行及時有效分析的要求。進(jìn)一步拓展對NoSQL方案和 NewSQL方案的研究，以取得更好的效果。同時在大數(shù)據(jù)存儲、管理、分析的方面需要革命性的理論和新算法的出現(xiàn)，需要新的兼?zhèn)浯笠?guī)模并行處理數(shù)據(jù)庫的高效率同時又具有 Hadoop平臺的高擴(kuò)展性特點的系統(tǒng)的出現(xiàn)。 RCCSE 中國科學(xué)評價研究中心 4 大數(shù)據(jù)時代索引與數(shù)據(jù)庫 事業(yè)面臨的挑戰(zhàn)及創(chuàng)新 51 ? （ 2）理念的轉(zhuǎn)變 ? 主要是對索引和數(shù)據(jù)庫的理論進(jìn)行更新，服務(wù)提供方式進(jìn)行創(chuàng)新，以實現(xiàn)商業(yè)價值。不能只滿足于傳統(tǒng)的理論，要對已有的理論進(jìn)行創(chuàng)新，需要對大數(shù)據(jù)中蘊含的價值進(jìn)行深入的挖掘，積極主動的提供給需要數(shù)據(jù)的對象，積極主動的去創(chuàng)造商機。 RCCSE 中國科學(xué)評價研究中心 4 大數(shù)據(jù)時代索引與數(shù)據(jù)庫 事業(yè)面臨的挑戰(zhàn)及創(chuàng)新 52 ? （ 3）方式的創(chuàng)新 ? 是指如何滿足人們的小型化、便捷化的需要，如何實現(xiàn)商機的主動獲取和推介。隨著智能設(shè)備的普及，人們使用的移動終端越來越小型化，便捷化，索引和數(shù)據(jù)庫的服務(wù)提供要重視這些終端，要開放接口，使用云技術(shù)，極大的改進(jìn)移動終端上的用戶體驗。 RCCSE 中國科學(xué)評價研究中心 4 大數(shù)據(jù)時代索引與數(shù)據(jù)庫 事業(yè)面臨的挑戰(zhàn)及創(chuàng)新 53 ? （ 4）人才的培養(yǎng) ? 一方面是加強對傳統(tǒng)的索引和數(shù)據(jù)庫專業(yè)的人才的教育和培養(yǎng)，更重要的是適應(yīng)大數(shù)據(jù)的要求，重視對數(shù)據(jù)科學(xué)和數(shù)據(jù)研究人員的教育和培養(yǎng)。數(shù)據(jù)研究人員應(yīng)該是具有良好視野的復(fù)合型人才，既有堅實的技術(shù)基礎(chǔ)，又有廣泛的業(yè)務(wù)知識和經(jīng)驗，從而能夠熟練的使用各種大數(shù)據(jù)工具，分析并制定出各種策略和計劃。 RCCSE 中國科學(xué)評價研究中心 4 大數(shù)據(jù)時代索引與數(shù)據(jù)庫 事業(yè)面臨的挑戰(zhàn)及創(chuàng)新 54 ? （ 5）國家的支持 ? 政府相關(guān)部門也要從整體規(guī)劃、配套建設(shè)、權(quán)益保護(hù)等方面出發(fā)，支持索引和數(shù)據(jù)庫事業(yè)的創(chuàng)新和發(fā)展。 ? 各高校和科研院所也應(yīng)該對此加大投入的力度，探索有益的成果。 RCCSE 中國科學(xué)評價研究中心 4 大數(shù)據(jù)時代索引與數(shù)據(jù)庫 事業(yè)面臨的挑戰(zhàn)及創(chuàng)新 55 5 結(jié)語 ? 大數(shù)據(jù)時代的到來，給索引和數(shù)據(jù)庫事業(yè)帶來了巨大的沖擊，提出了新的要求。面對挑戰(zhàn)，索引和數(shù)據(jù)庫事業(yè)的經(jīng)過發(fā)展與創(chuàng)新，必然會給用戶提供更高水平的服務(wù)。 索引和數(shù)據(jù)庫事業(yè)的發(fā)展也會推向一個新階段 。 RCCSE 中國科學(xué)評價研究中心
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號-1