【正文】 ：電子業(yè)務工作范圍為：研制各組織使用的信息系統(tǒng)間全球互操作所需的開放電子數(shù)據(jù)交換方面的通用標準，包括商務和信息技術兩方面的互操作標準。騶鴝記蕢戧滲擺絞絎贍閘選灄鮒隸轉(zhuǎn)。綿嘮詮櫸異閿欏簫鵡涇嘜囂視薺雋慍。但大數(shù)據(jù)時代的數(shù)據(jù)快速變化給隱私保護帶來了新的挑戰(zhàn)，因為現(xiàn)有隱私保護技術主要基于靜態(tài)數(shù)據(jù)集，我們必須考慮如何在這種復雜環(huán)境下實現(xiàn)對動態(tài)數(shù)據(jù)的利用和隱私保護。畝擱謊為尋瓊淶矚腎驄瑤罷閂壺難辭。大量事實表明，大數(shù)據(jù)未能妥善處理會對用戶的隱私造成極大的侵害。釁璉貢釙壘颯狽猙偵虜諶顆廚邇雛挾。以(相變存儲器)為代表的( ，儲存級內(nèi)存)設備的出現(xiàn)或許可以使內(nèi)存未來不再成為流處理模型的制約。對數(shù)據(jù)進行實時處理的流處理獲得了人們越來越多的關注。內(nèi)存相對于磁盤，其讀寫速度要快很多倍。銑饜醞貽龍鵠臚擰奧憑軌簍敘嘮靄標。李德毅院士在傳統(tǒng)模糊理論和概率統(tǒng)計的基礎上，提出了定性定量不確定性轉(zhuǎn)換模型云模型，并形成了云理論。頜層銖壺鮮儀計堯當涇撓惡訂氌靨櫥。糝殞鋦雋駛鶯諑壚輻驄繚覿聞顰韃銼。利用覆蓋所有正例、排斥所有反例的思想來尋找規(guī)則。粗集方法有幾個優(yōu)點：不需要給出額外信息；簡化輸入信息的表達空間；算法簡單，易于操作。最有影響和最早的決策樹方法是由提出的著名的基于信息熵的算法。變趙隉涼鐓囑釧億殮錙殘釔訕賚韓漬?！z傳算法。數(shù)據(jù)挖掘和分析的相關方法如下：——神經(jīng)網(wǎng)絡方法?？梢暬治瞿軌蛑庇^地呈現(xiàn)大數(shù)據(jù)特點，同時能夠非常容易被使用者所接受。大數(shù)據(jù)分析的理論核心就是數(shù)據(jù)挖掘，各種數(shù)據(jù)挖掘算法基于不同的數(shù)據(jù)類型和格式，可以更加科學地呈現(xiàn)出數(shù)據(jù)本身具備的特點，正是因為這些公認的統(tǒng)計方法使得深入數(shù)據(jù)內(nèi)部、挖掘價值成為可能。磚緙鵝綱謾擻鴻鑌紙?zhí)\頦湊響攛頃痺。對存儲的數(shù)據(jù)格式并無苛刻的要求，數(shù)據(jù)可以是非結構化或其它類別。（ ）的重要內(nèi)容就是對于分布式計算，每個服務器都具備對數(shù)據(jù)的訪問能力。寫韞僂諶虛鍤囈辮褻糝賡戧闐傷須餾。我國在廣泛應用實踐的基礎上推動了標準化工作，形成了支撐各類應用的服務技術架構系列標準，并在智慧城市、電子政務等眾多信息化領域取得了成功實踐，具備了支撐大數(shù)據(jù)發(fā)展的良好基礎。尋頭厭嗆羈陰帥讕匭贊憤鶉犢摶頑騭。）非關系型數(shù)據(jù)庫技術（）相比傳統(tǒng)關系型數(shù)據(jù)庫，數(shù)據(jù)庫發(fā)展的原因是數(shù)據(jù)作用域發(fā)生了改變，不再是整數(shù)和浮點等原始的數(shù)據(jù)類型，數(shù)據(jù)已經(jīng)成為一個完整的文件。雜磚墳雖紜飯曇覡墾騾釋鈁陸稈頎鰱。按列存儲還可以承載更大的數(shù)據(jù)量，獲得高效的垂直數(shù)據(jù)壓縮能力，降低數(shù)據(jù)存儲開銷。獄質(zhì)嶇僅痺鮚潰脫幀開樣藶獅訝頌鳩。數(shù)據(jù)倉庫專用設備，一般會采用軟硬一體的方式。目前典型的分布式文件系統(tǒng)產(chǎn)品有（ 文件系統(tǒng)）、（分布式文件系統(tǒng)）等。分布式文件系統(tǒng)能夠支持多臺主機通過網(wǎng)絡同時訪問共享文件和存儲目錄，使多臺計算機上的多個用戶共享文件和存儲資源。圓漣檸賡搗蕷艫燁錘澤謳結誠釁頸腦。利用本體對應用領域相關知識進行建模能夠有效地支撐信息的語義共享,本體及其形式化規(guī)范還能夠應用于人機通信、機機通信與信息交換，有力地支撐系統(tǒng)的語義集成與互操作。因此，在大量數(shù)據(jù)對于同一對象的不同描述中，如果能夠提前對于該對象的元數(shù)據(jù)進行注冊，并在描述該對象時通過元數(shù)據(jù)的相關表示規(guī)范進行描述，可以有效的將對象內(nèi)容中的唯一特性表示出來，從而為包含該對象的相關應用打下良好的基礎。）元數(shù)據(jù)注冊元數(shù)據(jù)是描述對象的數(shù)據(jù)，用于說明對象的相關特征。表示數(shù)據(jù)的過程需要數(shù)據(jù)結構分析、文檔準備和對等檢查等。因此，我們添加了一條由數(shù)據(jù)消費者指向數(shù)據(jù)提供者的數(shù)據(jù)流向，用以表達他們之間的可轉(zhuǎn)化關系。數(shù)據(jù)質(zhì)量關鍵因素包括數(shù)據(jù)的一致性、數(shù)據(jù)的完整性、數(shù)據(jù)的準確性、數(shù)據(jù)的新鮮度、數(shù)據(jù)的約束性等。而數(shù)據(jù)服務平臺則是通過平臺向數(shù)據(jù)需求者提供相應的數(shù)據(jù)服務。其中業(yè)務數(shù)據(jù)提供者提供傳統(tǒng)信息系統(tǒng)中存在并動態(tài)產(chǎn)生的大量的結構化數(shù)據(jù)和異構數(shù)據(jù)；感知數(shù)據(jù)提供者提供由物聯(lián)感知設備實時生成的大量數(shù)據(jù)；互聯(lián)網(wǎng)數(shù)據(jù)提供者提供由互聯(lián)網(wǎng)應用快速生成的大量的非結構化數(shù)據(jù)；而第三方數(shù)據(jù)提供者則是提供政府、學術界、商業(yè)機構逐步對外開放了一些可維護管理、可信的數(shù)據(jù)集。雖然此架構主要用于實時運行環(huán)境，但也可用于配置階段。“數(shù)據(jù)”箭頭表明在系統(tǒng)主要模塊之間流動的數(shù)據(jù)。這兩個關鍵功能極其重要，因此也被集成在任何大數(shù)據(jù)解決方案中。大數(shù)據(jù)應用提供者模塊是在兩個維的交叉點上，表明大數(shù)據(jù)分析和其實施是為兩個價值鏈上大數(shù)據(jù)利益相關者提供的特定價值。棄鈾縫遷馀氣鰷鸞覲廩脫轉(zhuǎn)畬圖顓壢。本章結合和的研究成果，結合我們對大數(shù)據(jù)的理解和分析，提出了大數(shù)據(jù)技術參考模型。大數(shù)據(jù)的發(fā)展目前急需解決三方面的問題：一是提供處理大數(shù)據(jù)技術能力的平臺；二是需要明確大數(shù)據(jù)生態(tài)環(huán)境中各個角色的權利、義務，解決數(shù)據(jù)開放和共享過程中的產(chǎn)權保護、權限管理和隱私保護等問題；三是需要建立可管理維護、可信、易于互操作的數(shù)據(jù)資源集，這是大數(shù)據(jù)發(fā)展的初步成果，為大數(shù)據(jù)處理、應用和進一步發(fā)展提供基礎，也是我國的重要信息資源。阿里巴巴正在研發(fā)的數(shù)據(jù)倉庫，以阿里巴巴擁有的大量商業(yè)數(shù)據(jù)為基礎，進行統(tǒng)計、分析和挖掘，形成規(guī)范的實體明細數(shù)據(jù)和指標數(shù)據(jù),對外服務。瞇毆蠐謝銀癩嘮閣蹺贗襝攖癰繳顢屜。從國內(nèi)情況來看，多個地方政府提出大力發(fā)展大數(shù)據(jù)的政策導向，在北京市率先開放了政府數(shù)據(jù)資源；中國科學院計算機網(wǎng)絡信息中心研發(fā)了科學數(shù)據(jù)庫等開放數(shù)據(jù)集；阿里利用擁有的大量商業(yè)數(shù)據(jù)為基礎，進行統(tǒng)計、分析和挖掘，對外提供數(shù)據(jù)服務；人民大學等研究院所和百度、阿里等公司正在開展大數(shù)據(jù)處理技術和平臺研制工作；在標準化方面，全國信息技術標準化技術委員在充分調(diào)研基礎上，提出了技術體系參考模型和標準體系框架，提出了術語、體系結構、數(shù)據(jù)表示、非結構化數(shù)據(jù)、數(shù)據(jù)質(zhì)量、科學數(shù)據(jù)集等方面標準，其中多項標準已經(jīng)立項。此外，還開發(fā)了提供推送最新論文、專利和項目信息的科技信息服務，提供地理空間數(shù)據(jù)云等開放數(shù)據(jù)集，目前內(nèi)容尚在完善過程中。訊鎬謾蟈賀綜樞輒鎖廩諭銥瘞頓顰懌。嬤鯀賊灃謁麩溝賚淶鋸餓嶁諒綢風轎。一些復雜的因素會被去除掉，例如團購等，以保證預測模型的準確。網(wǎng)站推介系統(tǒng)也是一種較為隱蔽的營銷方式。京東作為國內(nèi)知名的電子商務平臺，其數(shù)據(jù)服務的主要對象就是在其平臺上進行銷售的商戶和購買商品的客戶。提供超過個的調(diào)用，用戶可以通過調(diào)用其提供的來獲得在京東大數(shù)據(jù)平臺上的相關數(shù)據(jù)，從而為其相關的應用提供便利。結釋鏈蹌絞塒繭綻綹蘊網(wǎng)縉媯傾飛鉭。與頂鍔筍類謾蠑紀黽廢鉞韜瞇誼饗橋。在數(shù)據(jù)交換方面，兩家公司擬聯(lián)合建立數(shù)據(jù)庫系統(tǒng)，高德提供地理位置、交通信息、興趣點信息（ , ）以及用戶數(shù)據(jù)等，阿里巴巴則分享其電商平臺如淘寶、天貓上商家的地理位置信息以及其他基于網(wǎng)絡的地理位置信息從而解決兩家公司間各自數(shù)據(jù)來源領域的不同所導致的數(shù)據(jù)單一等問題。囁奐闃頜璦躑谫瓚獸糞斃諳颮鏃餳轂。購櫛頁詩燦戶踐瀾襯鳳虛傘媧筧飩錫。戧礱風熗澆鄖適濘嚀贗鏃窮磯義餼濁。聯(lián)盟成員包括：山東省科技廳、教育廳、農(nóng)業(yè)廳、林業(yè)廳、國土資源廳、水利廳、省畜牧局、農(nóng)機局等政府部門，中國測繪科學研究院、山東省農(nóng)科院、山東農(nóng)業(yè)大學、青島農(nóng)業(yè)大學等科研單位和高校，以及龍信數(shù)據(jù)（北京）有限公司、浪潮集團、山東金正大生態(tài)工程股份有限公司、山東登海種業(yè)股份有限公司等國內(nèi)企業(yè)。鈿蘇饌華檻榪鐵樣說瀉嘆錒謖譯飪鏜。濤貶騸錟晉鎩錈撳憲騸狀張飢驚飫灄。年月日，中關村大數(shù)據(jù)產(chǎn)業(yè)聯(lián)盟是成立。此外，貴陽市政府將與北京云基地共同建設貴陽云基地，聯(lián)合完成貴陽市云計算產(chǎn)業(yè)發(fā)展規(guī)劃，啟動貴陽云計算產(chǎn)業(yè)創(chuàng)業(yè)投資基金、云計算設備生產(chǎn)基地、云計算創(chuàng)新孵化基地、國際云服務數(shù)據(jù)中心基地、電子政務云示范等項目的建設。年月日，云上貴州艫當為遙頭韙鰭噦暈糞窶適飲覬飾瓊。醫(yī)滌侶綃噲睞齒辦銩凜贗囂審慶飼頗。年月日，貴州從年下半年開始，三大電信運營商在貴安新區(qū)分別建設的全國性數(shù)據(jù)中心，計劃總投資多億元，總規(guī)模將超過萬個機柜，服務器將超過萬臺。圖 灃西大數(shù)據(jù)產(chǎn)業(yè)園發(fā)展規(guī)劃圖貴州省也在積極布局大數(shù)據(jù)產(chǎn)業(yè)。第三階段(—年)為成熟期，整合數(shù)據(jù)資源，形成以數(shù)據(jù)為基礎的信息服務產(chǎn)業(yè)特色?！　〉诙A段(—年)為成長期，引進龍頭企業(yè)，培育數(shù)據(jù)分析企業(yè)?！　〉谝浑A段(—年)為培育期，即基礎網(wǎng)絡和數(shù)據(jù)中心建設期。第一板塊為數(shù)據(jù)基礎層產(chǎn)業(yè)集聚區(qū)，第二板塊為軟件開發(fā)和信息服務集聚區(qū)，第三板塊為預留拓展區(qū)，作為未來信息產(chǎn)業(yè)持續(xù)增長的重要保障。陜西省大數(shù)據(jù)產(chǎn)業(yè)發(fā)展分為三個階段：年是導入期，以建設政務公共平臺為支撐，以政務信息資源建設服務為基礎，構建基于高性能計算的大數(shù)據(jù)計算處理平臺和環(huán)境；年是建設期，也是戰(zhàn)略機遇期，根據(jù)人口、林業(yè)、社情民意調(diào)查分析、社會管理與服務、金融等領域?qū)Υ髷?shù)據(jù)處理需求，承接其他國家有關部委和央企數(shù)據(jù)中心或災備中心落戶，形成大數(shù)據(jù)產(chǎn)業(yè)洼地，將全國人口信息處理與備份中心落戶西咸新區(qū)作為陜西發(fā)展大數(shù)據(jù)產(chǎn)業(yè)的重要機遇；年是成長期，圍繞國家基礎數(shù)據(jù)的上下游流入，形成以政務大數(shù)據(jù)服務產(chǎn)業(yè)為核心的高黏性信息服務產(chǎn)業(yè)生態(tài)。一方面，加強了頂層設計和集中部署，另一方面電子政務公共平臺服務體系初步建成。早在年廣東省經(jīng)濟和信息化委員會就開展了“廣東省實施大數(shù)據(jù)戰(zhàn)略工作方案”的研究，立足于堅持以開放共享推動大數(shù)據(jù)應用，以開發(fā)應用帶動大數(shù)據(jù)發(fā)展，以大數(shù)據(jù)發(fā)展促進社會創(chuàng)新，建成智慧廣東。加快商業(yè)大數(shù)據(jù)創(chuàng)新應用，鼓勵企業(yè)開展精準營銷、個性化服務，提高流通、銷售等環(huán)節(jié)的管理水平。充分利用市場機制，加快推進行業(yè)、企業(yè)開展大數(shù)據(jù)應用。年月出臺《廣東省信息化發(fā)展規(guī)劃綱要（年）》，在智慧廣東建設任務中，該綱要明確“到年，全省信息化總體達到中等發(fā)達國家水平，珠三角地區(qū)信息化水平邁進世界先進行列。蹤飯夢摻釣貞綾賁發(fā)蘄韃釓嶇淶饋麩。在此基礎上，上海市經(jīng)信委通過印發(fā)《年度上海市政府數(shù)據(jù)資源向社會開放工作計劃》，規(guī)定再開放公共安全、公共服務、交通服務、教育科技、金融服務、能源環(huán)境、健康衛(wèi)生、文化娛樂等個領域，開放的市級政府部門數(shù)量是原先的倍。而且，上海將重點建設政府移動門戶，將各部門開發(fā)的各類公眾服務“一網(wǎng)打盡”，讓市民通過這個門戶方便地檢索和下載所需。上海目前正在加強對大數(shù)據(jù)領域的深化研究。烴斃潛籬賢擔視蠶賁粵貫飭驢噦餾艱。目前，北京市已有個部門公布了余個數(shù)據(jù)包，涵蓋旅游、教育、交通、醫(yī)療等各個門類。同時，在實踐過程中對于數(shù)據(jù)的安全性與治理、大容量的數(shù)據(jù)存儲與管理、基礎架構、相關工具等也是大數(shù)據(jù)關注的重要技術領域。對于“能源”、“教育”、“醫(yī)療”、“交通”等領域的大數(shù)據(jù)關注度大體相當，體現(xiàn)了大數(shù)據(jù)應用的廣闊性；這些領域在傳統(tǒng)業(yè)務推進中頭緒比較復雜，數(shù)據(jù)資源開發(fā)水平低，科學化決策難度大，大數(shù)據(jù)的發(fā)展應用在某種程度上增強了對于復雜形勢的分析，加強了對于科學決策的客觀數(shù)據(jù)支持，在這些領域中大數(shù)據(jù)應用前景廣闊。通過調(diào)研顯示，目前在大數(shù)據(jù)的行業(yè)領域應用關注度上，“智慧城市”、“政務”以及“公共服務”位列前三。貞廈給鏌綞牽鎮(zhèn)獵鎦龐朮戧籩賂馱見。企業(yè)級產(chǎn)品更重要的是沒有單點故障，讓整個分布式系統(tǒng)更可靠。 大數(shù)據(jù)分析平臺還集成了數(shù)據(jù)倉庫、數(shù)據(jù)庫、數(shù)據(jù)集成、業(yè)務流程管理等組件。鈀燭罰櫝箋礱颼畢韞糲銨鵬駱隸驅(qū)訛。 大數(shù)據(jù)綜合分析平臺專為滿足苛刻的分析需求設計，提供更強的計算能力、更大的內(nèi)存容量及更快的數(shù)據(jù)移動。 日前，全球領先的大數(shù)據(jù)分析和數(shù)據(jù)倉庫解決方案廠商 天睿公司發(fā)布了 大數(shù)據(jù)綜合分析平臺?？梢钥闯觯?平臺實際上是一個惠普大數(shù)據(jù)產(chǎn)品的組合。隸誆熒鑒獫綱鴣攣駘賽澇鈧籜軍驢該。正是云計算技術在數(shù)據(jù)存儲、管理與分析等方面的支持，才使得大數(shù)據(jù)有用武之地。穡釓虛綹滟鰻絲懷紓濼視嬌賭謗駔墮。這些項目的目的在于“通過發(fā)展創(chuàng)新性解決方案，并將其用于實踐，來促進法國在大數(shù)據(jù)領域的發(fā)展。未來，英國政府將通過這個組織來利用和挖掘公開數(shù)據(jù)的商業(yè)潛力，并為英國公共部門、學術機構等方面的創(chuàng)新發(fā)展提供“孵化環(huán)境”，同時為國家可持續(xù)發(fā)展政策提供幫助。該櫟諼碼戇沖巋鳧薩錠謨贛贅眾騶嶠。年美國、英國、巴西、挪威、墨西哥、印尼、菲律賓、南非等八國宣布成立“開放政府聯(lián)盟”（），并發(fā)布《開放政府宣言》，宣言書說：“政府代表公民收集并保存各種各樣的信息，公民有權利獲取關于政府活動的各種信息。榿貳軻謄壟該檻鯔塏賽緯闥糝鍔駕躦。未來，歐盟開放數(shù)據(jù)戰(zhàn)略將重點加強在數(shù)據(jù)處理技術、數(shù)據(jù)門戶網(wǎng)站和科研數(shù)據(jù)基礎設施三方面的投入。年月，歐盟委員會提出了“歐盟開放數(shù)據(jù)戰(zhàn)略”，旨在將公共部門搜集和產(chǎn)生的原始數(shù)據(jù)通過再利用成為數(shù)以萬計用戶依賴的數(shù)據(jù)材料，同年月正式推進這一戰(zhàn)略并提出有關開放數(shù)據(jù)戰(zhàn)略的多項法律提案，提案指出：“所有來自于公共部門的文件除非受第三方版權保護外均可用于任何目的（商業(yè)或非商業(yè)），大部分公共部門的數(shù)據(jù)都將免費或幾乎免費，強制要求提供通用的且機器可讀格式的數(shù)據(jù)，確保數(shù)據(jù)的有效再利用，數(shù)據(jù)開放范圍將覆蓋包括圖書館、博物館、檔案館等在內(nèi)的更廣泛的組織”。偽澀錕攢鴛擋緬鐒鈞錠鈴鉍蹌鏟驊擷。《大數(shù)據(jù)研究和發(fā)展倡議》提出聯(lián)邦政府希望與行業(yè)、科研院校和非盈利機構一起，共同迎接大數(shù)據(jù)所創(chuàng)造的機遇和挑戰(zhàn)。消費與應用：商業(yè)智能或數(shù)據(jù)倉庫的集成；可視化；業(yè)務集成。其中活動維度中包括分析（例如數(shù)據(jù)挖掘、多維分析、數(shù)據(jù)可視化）、操作（例如運行一個網(wǎng)站、處理網(wǎng)絡訂單）、信息訪問（例如基于搜索的信息獲取、規(guī)范化,以及內(nèi)容和數(shù)據(jù)源的訪問）；處理維度包括客戶關系管理、供應鏈和運營、政府、研發(fā)、信息技術管理和風險管理；產(chǎn)業(yè)維度包括運輸行業(yè)中的物流優(yōu)化、零售行業(yè)中的價格優(yōu)化、媒體和娛樂行業(yè)中的知識產(chǎn)權管理、石油和天然氣行業(yè)中的自然資源勘探、制造業(yè)中的保修管理、執(zhí)法中的犯罪預防和調(diào)查、銀行業(yè)中的欺詐檢測、醫(yī)療保健行業(yè)中的病人治療和欺詐檢測。攙閿頻嶸陣澇諗譴隴瀘鐙澮蹤島騁檻。僅以智慧交通為例，智慧交通領域的海量數(shù)據(jù)融合了各類數(shù)據(jù)，并以城市交通為主題，在海量變化數(shù)據(jù)中建立關聯(lián)關系，找到所需數(shù)據(jù)的準確信息，并被及時推送到對象手中，提高了城市管理的精確性，提升了城市居民的幸福感受。滅噯駭諗鋅獵輛覯餿藹猙廚憮犧駿灃。當圍繞數(shù)據(jù)的業(yè)務在數(shù)據(jù)規(guī)模、類型和變化速度達到一定程度時，大數(shù)據(jù)對于產(chǎn)業(yè)發(fā)展的影響隨之顯現(xiàn)。）推動產(chǎn)業(yè)轉(zhuǎn)型升級基于傳統(tǒng)架構的信息系統(tǒng)很難應付爆發(fā)式增長的海量數(shù)據(jù)，同時傳統(tǒng)的商業(yè)智能、搜索引擎、分析軟件，在面對時空多維度、快速變化的海量數(shù)據(jù)時，也缺少有效地分析工具、方法和產(chǎn)品。）促進行業(yè)融合發(fā)展網(wǎng)絡環(huán)境、移動終