福建生態(tài)環(huán)境大數(shù)據(jù)平臺(tái)概要設(shè)計(jì)v0-文庫吧資料
2025-07-06 09:06本頁面
【正文】 在更低層次提供多種數(shù)據(jù)安全保障。4. 本地化I/O，在平臺(tái)中，由于計(jì)算資源的虛擬化，會(huì)盡量移動(dòng)計(jì)算到數(shù)據(jù)所在的節(jié)點(diǎn)，而不是移動(dòng)數(shù)據(jù)自身，因而大部分的數(shù)據(jù)不需要跨越網(wǎng)絡(luò)讀寫。2. 遠(yuǎn)程內(nèi)存直接訪問（RDMA）技術(shù)的深度運(yùn)用，從本質(zhì)上改變平臺(tái)的使用場(chǎng)景，平臺(tái)開發(fā)者可以如同使用一臺(tái)超級(jí)計(jì)算機(jī)一樣，在一個(gè)開發(fā)平面上開發(fā)與運(yùn)行自已的業(yè)務(wù)系統(tǒng)。 并行計(jì)算系統(tǒng)極融并行計(jì)算系統(tǒng)的主要設(shè)計(jì)思想是軟件定義一切，高度的抽象化；所有的資源均虛擬化以提高自動(dòng)化管理能力及容錯(cuò)能力。生態(tài)環(huán)境數(shù)據(jù)中心根據(jù)數(shù)據(jù)采集后的數(shù)據(jù)，根據(jù)排放因子等進(jìn)行計(jì)算，形成溫室氣體排放數(shù)據(jù)庫。 數(shù)據(jù)倉庫設(shè)計(jì)生態(tài)環(huán)境數(shù)據(jù)中心的主體是生態(tài)環(huán)境數(shù)據(jù)倉庫，數(shù)據(jù)倉庫以主題的方式建立。并提供按人員、功能操作、時(shí)間等多種條件的系統(tǒng)日志查詢，支持對(duì)重大安全事件（如數(shù)據(jù)修改）的追蹤和回溯。系統(tǒng)對(duì)登錄用戶的密碼以加密形式保存，對(duì)多次（比如三次）嘗試登錄失敗的用戶進(jìn)行封鎖，并記入系統(tǒng)日志。具體實(shí)現(xiàn)上系統(tǒng)將提供所有角色或用戶信息列表、所有的功能界面列表、每個(gè)功能界面上所有的資源操作類型列表，只要對(duì)角色或用戶權(quán)限范圍內(nèi)的業(yè)務(wù)信息及操作權(quán)限進(jìn)行打勾選擇即可，配置靈活。通過配置權(quán)限功能、操作模塊和擁有窗體的操作類型（如讀、寫、刪除、顯示等），決定不同角色的授權(quán)范圍或者不同角色及用戶訪問的數(shù)據(jù)資源范圍。權(quán)限管理就是保障大數(shù)據(jù)分析平臺(tái)安全性和數(shù)據(jù)安全性的手段，也是企業(yè)強(qiáng)化管理的手段。并采用用戶組的方式對(duì)用戶權(quán)限進(jìn)行管理，一個(gè)用戶組可以包括多個(gè)權(quán)限相同的用戶，用戶組設(shè)定遵循便于生產(chǎn)、靈活管理的原則，以生產(chǎn)過程中的職能為依據(jù)，可以以崗位為基礎(chǔ)進(jìn)行劃分，也可以按照實(shí)際需要重新進(jìn)行劃分。 系統(tǒng)管理系統(tǒng)管理屬于數(shù)據(jù)分析平臺(tái)的功能。 搜索分析平臺(tái)在豐富的業(yè)務(wù)模板庫的基礎(chǔ)上可以快速的為使用在搜索中發(fā)現(xiàn)關(guān)鍵信息，可以使你輕松的在1到3秒以內(nèi)完成85%以上的生態(tài)環(huán)境分析。，按排放類型等預(yù)警分。2. 環(huán)境生態(tài)環(huán)境健康圖譜，大數(shù)據(jù)挖掘建立綜合評(píng)價(jià)體。，全面能耗監(jiān)測(cè)，為宏觀分析和決策提供數(shù)據(jù)分析支撐。，實(shí)時(shí)掌握資源的利用。 通用功能設(shè)計(jì)可視化展現(xiàn)，就是把所有的最終結(jié)果數(shù)據(jù)以全息地圖方式呈現(xiàn)在使用者面前，其所有的信息均具備地理屬性。. 環(huán)保平臺(tái)應(yīng)用表示層設(shè)計(jì)應(yīng)用系統(tǒng)分為平臺(tái)通用功能模塊以及各種專題子系統(tǒng)構(gòu)成；應(yīng)用系統(tǒng)通過調(diào)用生態(tài)環(huán)境推薦引擎和其它大數(shù)據(jù)分析技術(shù)來完成就用系統(tǒng)的功能，不須要單獨(dú)開發(fā)自己的底層數(shù)據(jù)分析功能。因而深度學(xué)習(xí)算法的成熟是滿足第二個(gè)核心條件的最佳解決方案之一。 僅有大規(guī)模運(yùn)算能力還是不夠的，使用人工智能技術(shù)是解決復(fù)雜非線性計(jì)算的關(guān)鍵； 如：美國超級(jí)計(jì)算機(jī)深藍(lán)，僅使用其強(qiáng)大的計(jì)算能力，沒有使用人工智能技術(shù)的情況下，與圍棋大師的較量中最終還是敗下陣來；而使用了深度學(xué)習(xí)技術(shù)的智能象棋程序，在自我學(xué)習(xí)8年后輕易就打敗了象棋大師。 2. 高效的數(shù)據(jù)價(jià)值提取算法。 Velocity(高速率) 大量的數(shù)據(jù)需要進(jìn)行快速的，實(shí)時(shí)的處理，才能在指定時(shí)間內(nèi)得到結(jié)果；數(shù)據(jù)的處理方法多以批量化，分布式為主要處理方式。 Value(價(jià)值) 價(jià)值通常也被理解為價(jià)值密度，也就是說依據(jù)大量的不相關(guān)信息進(jìn)行深度復(fù)雜分析，對(duì)未來趨勢(shì)與模式的做出可靠的判定，從而發(fā)現(xiàn)數(shù)據(jù)的價(jià)值。 Variety(多樣性) 大數(shù)據(jù)的異構(gòu)和多樣性很多不同形式（文本、圖像、視頻、機(jī)器數(shù)據(jù)）無模式或者模式不明顯不連貫的語法或語義。 Volume(容量) 根據(jù)IDC(國際數(shù)據(jù)公司)的監(jiān)測(cè)統(tǒng)計(jì)，(1ZB等于1萬億GB，)，而這個(gè)數(shù)值還在以每兩年翻一番的速度增長，預(yù)計(jì) 到2020年全球?qū)⒖偣矒碛?5ZB的數(shù)據(jù)量，增長近20倍。5. 平臺(tái)建設(shè)關(guān)鍵技術(shù)大數(shù)據(jù)是指一般的軟件工具難以捕捉、管理和分析的大容量數(shù)據(jù),通常以PB來計(jì)量(1P=1024T,1T=1024G)。并行計(jì)算環(huán)境層為上層提供大規(guī)模計(jì)算與存儲(chǔ)服務(wù)，并行計(jì)算環(huán)境層由工作流協(xié)調(diào)處理系統(tǒng),并行式文件系統(tǒng)組成。環(huán)保氣象數(shù)據(jù)處工功能主要負(fù)責(zé)接入全省實(shí)時(shí)氣象數(shù)據(jù)和預(yù)報(bào)數(shù)據(jù)，將其處理為可供各個(gè)其它應(yīng)用的基礎(chǔ)數(shù)據(jù)，并提供相關(guān)的計(jì)算模型進(jìn)行反向耦合計(jì)算。所有的大氣環(huán)境污染，都在在大氣環(huán)流中彌散傳播的。，以支持節(jié)能減排降生態(tài)環(huán)境目標(biāo)的預(yù)警調(diào)控方案。，對(duì)生態(tài)環(huán)境未來進(jìn)行預(yù)測(cè)和預(yù)警。建立生態(tài)環(huán)境評(píng)價(jià)與挖掘平臺(tái)，自動(dòng)完成主要行業(yè)基于溫室氣體排放分析研究報(bào)告，為工業(yè)源的溫室氣體排放研究、評(píng)估以及未來的控制政策提供支撐支持。控制指標(biāo)包括排放系數(shù)統(tǒng)計(jì)信息分類的所有指標(biāo)。為城市管理者提供現(xiàn)狀評(píng)估、趨勢(shì)預(yù)測(cè)、潛力分析、目標(biāo)制定分解及跟蹤等輔助決策服務(wù)。環(huán)保推薦引擎完成數(shù)據(jù)挖掘與專題分析任務(wù)，為上層提供判定結(jié)果。通過對(duì)輻射環(huán)境類大氣監(jiān)測(cè)數(shù)據(jù)的大數(shù)據(jù)挖掘，實(shí)現(xiàn)核與輻射數(shù)據(jù)的相關(guān)業(yè)務(wù)應(yīng)用。由于核輻射看不起，摸不著，但卻是人民群眾密切關(guān)注的，這就需要與之相匹配的輻射環(huán)境大氣自動(dòng)監(jiān)測(cè)網(wǎng)。福建省核電發(fā)展迅猛，在建的寧德核電廠與福清核電廠分別于2012年和2013年投
公司管理相關(guān)推薦
鄂ICP備17016276號(hào)-1