大數(shù)據(jù)時代索引與數(shù)據(jù)庫技術(shù)的發(fā)展與創(chuàng)新55-文庫吧在線文庫
【正文】 ? （ 1） 數(shù)量大（ Volume） 。數(shù)據(jù)流動的速度在加快，要有效的處理大數(shù)據(jù)，需要在數(shù)據(jù)變化的過程中實(shí)時的對其進(jìn)行分析，而不是滯后的進(jìn)行處理。這是一個衍生特征。 ? 現(xiàn)實(shí) 的節(jié)點(diǎn)： 2023年是人類創(chuàng)造的信息量有史以來第一次在理論上超過可用存儲空間總量的一年。 ? （ 3） 大數(shù)據(jù)時代的到來，必定會對索引和數(shù)據(jù)庫事業(yè)也產(chǎn)生重大影響 。 ? 在國際， SCI等三大索引在科技界形成了重大影響，其他領(lǐng)域的索引應(yīng)用也取得了廣泛的成果。相對而言，國外學(xué)者的理論研究更具全面性和系統(tǒng)性。 ? 數(shù)據(jù)庫事業(yè)的發(fā)展現(xiàn)狀 ? 數(shù)據(jù)庫（ Database）是按照數(shù)據(jù)結(jié)構(gòu)來組織、存儲和管理數(shù)據(jù)的倉庫。如：分布式數(shù)據(jù)庫、聯(lián)合數(shù)據(jù)庫、大規(guī)模并行處理數(shù)據(jù)庫等。 ? 數(shù)據(jù)庫技術(shù)和系統(tǒng)已經(jīng)成為世界各國信息基礎(chǔ)設(shè)施的核心技術(shù)和重要基礎(chǔ)。大數(shù)據(jù)時代的數(shù)據(jù)產(chǎn)生迅速，數(shù)據(jù)的價值生命周期卻很短暫，如何能夠及時有效的從數(shù)據(jù)中發(fā)現(xiàn)商機(jī)并付諸行動才能獲取價值。 ? 云數(shù)據(jù)庫具有以下特性：動態(tài)可擴(kuò)展，理論上，云數(shù)據(jù)庫具有無限可擴(kuò)展性；高可用性，不存在單點(diǎn)失效問題；較低使用代價，可以實(shí)現(xiàn)按需付費(fèi)；可以大規(guī)模并行處理。 ? 目前產(chǎn)生了一些新型的在線事務(wù)處理系統(tǒng)，如 NoSQL方案和 NewSQL方案。 ? 為了成功的實(shí)現(xiàn)對大數(shù)據(jù)的分析，還要建立具有敏捷的計(jì)算平臺，線性擴(kuò)展能力，全方位、協(xié)作性用戶體驗(yàn)的大數(shù)據(jù)分析平臺，還需要聚類分析等高級的分析理論和方法以及方便易用的數(shù)據(jù)可視化技術(shù)。不能只滿足于傳統(tǒng)的理論，要對已有的理論進(jìn)行創(chuàng)新，需要對大數(shù)據(jù)中蘊(yùn)含的價值進(jìn)行深入的挖掘，積極主動的提供給需要數(shù)據(jù)的對象，積極主動的去創(chuàng)造商機(jī)。面對挑戰(zhàn)，索引和數(shù)據(jù)庫事業(yè)的經(jīng)過發(fā)展與創(chuàng)新，必然會給用戶提供更高水平的服務(wù)。數(shù)據(jù)研究人員應(yīng)該是具有良好視野的復(fù)合型人才，既有堅(jiān)實(shí)的技術(shù)基礎(chǔ)，又有廣泛的業(yè)務(wù)知識和經(jīng)驗(yàn)，從而能夠熟練的使用各種大數(shù)據(jù)工具，分析并制定出各種策略和計(jì)劃。 ? （ 1）技術(shù)的創(chuàng)新 ? 需要進(jìn)一步滿足對容量大、種類多、變化快的數(shù)據(jù)進(jìn)行及時有效分析的要求。 ? NewSQL方案是既能保留 SQL查詢的方便性，又能提供高性能和高擴(kuò)展性的新型數(shù)據(jù)分析工具，是一種新型的關(guān)系數(shù)據(jù)庫管理系統(tǒng)。 ? （ 3） 數(shù)據(jù)存儲 ? 大數(shù)據(jù)的特征，需要新的數(shù)據(jù)存儲技術(shù)和數(shù)據(jù)存儲工具來滿足。面對大數(shù)據(jù)必須采取新方法來處理數(shù)據(jù)，要實(shí)現(xiàn)從規(guī)模較小的數(shù)據(jù)集到大規(guī)模數(shù)據(jù)集的分析，因?yàn)槲覀儾荒芸刂扑媾R的數(shù)據(jù)源產(chǎn)生數(shù)據(jù)的規(guī)模。 ? 大數(shù)據(jù)時代對索引和數(shù)據(jù)庫事業(yè)提出了如下的 重大挑戰(zhàn) ： ? （ 1） 理念更新 。 ? 分析我國數(shù)據(jù)庫建設(shè)現(xiàn)狀，目前 仍處于較低的發(fā)展階段 。 ? 1980年以前，數(shù)據(jù)庫技術(shù)的發(fā)展，主要體現(xiàn)在 數(shù)據(jù)庫的模型設(shè)計(jì) 上。在索引研究的過程中注重與其他學(xué)科的結(jié)合，一方面可以引入新的理論與方法，如社會學(xué)、本體、知識地圖、元數(shù)據(jù)等，為索引理論和方法的研究帶來新的視角；另一方面，索引的方法與研究成果也可以應(yīng)用于其他學(xué)科，為促進(jìn)其他學(xué)科研究的發(fā)展做出貢獻(xiàn)。 ? 具體表現(xiàn)在以下四個方面： ? 第一，國內(nèi)外對電子索引技術(shù)的研究日益成熟，在國內(nèi)正處于研究網(wǎng)絡(luò)的中心，而在國外已逐漸處于網(wǎng)絡(luò)邊緣。” ? 一般來說，索引的編制有手工和計(jì)算機(jī)編制兩種 方式，隨著科技和時代的發(fā)展，目前基本都使用計(jì)算機(jī)編制索引的方式。 ? 通過互聯(lián)網(wǎng)和社交網(wǎng)絡(luò)、數(shù)碼相機(jī)等工具，每個人的日常生活正在被數(shù)字化，人們可以隨時方便的根據(jù)自己的需要，產(chǎn)生大量的非結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)。 ? 半結(jié)構(gòu)化的數(shù)據(jù) 是指具有一定的結(jié)構(gòu)性并可被解析或者通過使
教學(xué)課件相關(guān)推薦
鄂ICP備17016276號-1