【正文】 促進(jìn)城市的發(fā)展。智慧城市在產(chǎn)生大數(shù)據(jù)的同時(shí)，“大數(shù)據(jù)”也支撐著智慧城市的建設(shè)和發(fā)展，而智慧城市的衡量指標(biāo)是由“大數(shù)據(jù)”體現(xiàn)的。 以上都是“大數(shù)據(jù)”在一些實(shí)際領(lǐng)域的應(yīng)用，未來“大數(shù)據(jù)”將會(huì)在更多的領(lǐng)域得到應(yīng)用，決策行為將會(huì)基于數(shù)據(jù)分析做出，通過對(duì)數(shù)據(jù)的整理和分析，政府和企業(yè)能夠預(yù)測(cè)個(gè)體下一步的需求，進(jìn)而提供更加智能與高效率的管理和服務(wù)。軍事領(lǐng)域，美國(guó)“2049項(xiàng)目研究所”于2008年在華盛頓成立，2010年它利用網(wǎng)絡(luò)上公開的數(shù)據(jù)和資料，分析和預(yù)測(cè)我國(guó)在軍事和經(jīng)濟(jì)領(lǐng)域的安全問題，發(fā)布了一份名為《中國(guó)核彈頭存放和使用系統(tǒng)》的報(bào)告，稱在陜西、江西、四川等地發(fā)現(xiàn)了中國(guó)的核武器基地，甚至還精確到了核基地所在的市縣名稱。氣象預(yù)測(cè)方面，一家美國(guó)公司把氣象數(shù)據(jù)放在亞馬遜的“云平臺(tái)”上進(jìn)行處理，以及時(shí)提供氣象預(yù)報(bào)的方式，保證當(dāng)?shù)氐霓r(nóng)牧業(yè)主在特定的地區(qū)以及特定的季節(jié)不會(huì)遭受天氣災(zāi)害，由此獲得了豐厚的利潤(rùn)。在Fcebook開盤前，Twitter上的情感逐漸轉(zhuǎn)向負(fù)向，25分鐘之后twitter的股價(jià)就開始下跌，當(dāng)twitter上的情感轉(zhuǎn)向正面時(shí)，F(xiàn)acebook的股價(jià)在8分鐘后也開始回彈，最終當(dāng)股市接近收盤，twitter上的情感轉(zhuǎn)向負(fù)面時(shí)，10分鐘口Facebook的股價(jià)又開始下跌，該機(jī)構(gòu)得出結(jié)論，Twitter上每一次情感傾向的轉(zhuǎn)向都會(huì)Facebook股價(jià)的波動(dòng)高度關(guān)聯(lián)。在IT領(lǐng)域，一個(gè)典型的案例就是eBay通過數(shù)據(jù)分析技術(shù)可以精確計(jì)算出廣告中的每一個(gè)關(guān)鍵字為公司帶來的回報(bào)，通過對(duì)廣告投放的優(yōu)化，自2007年以來eBay產(chǎn)品銷售的廣告費(fèi)降低了99%，而頂級(jí)賣家占總銷售額的百分比卻上升至32%?！按髷?shù)據(jù)”在典型領(lǐng)域中的應(yīng)用當(dāng)前“大數(shù)據(jù)”已經(jīng)在物理學(xué)、生物學(xué)、環(huán)境生態(tài)學(xué)等領(lǐng)域，以及軍事、金融、通訊等行業(yè)有所應(yīng)用并帶來了巨大的產(chǎn)業(yè)價(jià)值。如基于twitter等網(wǎng)上公開數(shù)據(jù)的實(shí)時(shí)感知、動(dòng)態(tài)獲取與綜合分析，結(jié)合仿真調(diào)控，預(yù)測(cè)大選結(jié)果；聯(lián)合國(guó)“全球脈動(dòng)”利用網(wǎng)絡(luò)大數(shù)據(jù)預(yù)測(cè)失業(yè)率與疾病暴發(fā)等現(xiàn)象，利用數(shù)字化的早起預(yù)警信號(hào)來提前指導(dǎo)援助項(xiàng)目，以免某個(gè)脫貧地區(qū)重新陷入貧困。在微觀方面可以利用PB級(jí)的日志數(shù)據(jù)和EB級(jí)的監(jiān)控?cái)?shù)據(jù)，挖掘潛在線索，如犯罪行為軌跡等。這種認(rèn)知可以是宏觀的，也可以是微觀的。 總結(jié)以往，“大數(shù)據(jù)”的應(yīng)用價(jià)值可以分為感知現(xiàn)在和預(yù)知未來兩部分。對(duì)于行業(yè)企業(yè)，“大數(shù)據(jù)”可以應(yīng)用到產(chǎn)品研發(fā)設(shè)計(jì)、生產(chǎn)運(yùn)作管理、供應(yīng)鏈管理、客戶關(guān)系管理、企業(yè)品牌營(yíng)銷等各個(gè)環(huán)節(jié)，能夠幫助企業(yè)準(zhǔn)確把握市場(chǎng)需求變動(dòng)、提高產(chǎn)品設(shè)計(jì)與生產(chǎn)效率、提高供應(yīng)鏈的敏捷性和準(zhǔn)確性、實(shí)現(xiàn)個(gè)性化精準(zhǔn)營(yíng)銷，同時(shí)也促進(jìn)IT技術(shù)的創(chuàng)新。對(duì)于“大數(shù)據(jù)”產(chǎn)業(yè)，政府與公共事業(yè)部門、行業(yè)企業(yè)、個(gè)人消費(fèi)者是其的最終用戶。咨詢機(jī)構(gòu)麥肯錫最早提出“大數(shù)據(jù)時(shí)代已經(jīng)到來”，在2012年發(fā)布的《大數(shù)據(jù)：創(chuàng)新、競(jìng)爭(zhēng)和生產(chǎn)力的下一個(gè)領(lǐng)域》文章上表明，在零售業(yè)、制造業(yè)、醫(yī)療衛(wèi)生和公共部門，“大數(shù)據(jù)”可以加快產(chǎn)業(yè)規(guī)模的增長(zhǎng)速度，降低生產(chǎn)運(yùn)營(yíng)成本；對(duì)于企業(yè)而言，采用“大數(shù)據(jù)”可以提升企業(yè)的競(jìng)爭(zhēng)力，改善企業(yè)的營(yíng)銷規(guī)劃，客戶定位，產(chǎn)品創(chuàng)新、工作流程優(yōu)化、人力資源管理、物理管理和風(fēng)險(xiǎn)控制等多方面的能力。而近年來國(guó)內(nèi)各地也興起了建設(shè)云計(jì)算基地的風(fēng)潮，客觀上為“大數(shù)據(jù)”在我國(guó)的推廣和應(yīng)用準(zhǔn)備了必備的儲(chǔ)存空間和訪問渠道。這樣的低成本硬件+低成本軟件+低成本運(yùn)維，更加經(jīng)濟(jì)和實(shí)用，也使得“大數(shù)據(jù)”處理和利用成為可能。一些大型的網(wǎng)站，通過提供基于“云”的服務(wù)，積累大量的數(shù)據(jù)，成為事實(shí)上的“數(shù)據(jù)中心”，這為“大數(shù)據(jù)”誕生奠定了基礎(chǔ)。云計(jì)算的出現(xiàn)改變了數(shù)據(jù)的存儲(chǔ)和訪問方式，在云計(jì)算出現(xiàn)之前，數(shù)據(jù)大多分散保存在每個(gè)人的個(gè)人計(jì)算機(jī)中、每家企業(yè)的服務(wù)器中。大容量的存儲(chǔ)不但要求系統(tǒng)具備在原有數(shù)據(jù)存儲(chǔ)規(guī)格上進(jìn)行擴(kuò)展的能力，還要簡(jiǎn)單快速的進(jìn)行擴(kuò)展。“大數(shù)據(jù)”與云計(jì)算對(duì)于許多組織來說，“大數(shù)據(jù)”對(duì)存儲(chǔ)容量的需求已經(jīng)超出目前的存儲(chǔ)能力。（4）語義引擎大數(shù)據(jù)分析廣泛應(yīng)用于網(wǎng)絡(luò)數(shù)據(jù)挖掘，可從用戶的搜索關(guān)鍵詞、標(biāo)簽關(guān)鍵詞、或其他輸入語義，分析，判斷用戶需求，從而實(shí)現(xiàn)更好的用戶體驗(yàn)和廣告匹配。（2） 數(shù)據(jù)挖掘算法大數(shù)據(jù)分析的理論核心就是數(shù)據(jù)挖掘算法，各種數(shù)據(jù)挖掘的算法基于不同的數(shù)據(jù)類型和格式能更加科學(xué)的呈現(xiàn)出數(shù)據(jù)本身具備的特點(diǎn)，而這些數(shù)據(jù)挖掘的算法能夠快速的處理大數(shù)據(jù)?！按髷?shù)據(jù)”分析技術(shù)當(dāng)大數(shù)據(jù)的采集和存儲(chǔ)已經(jīng)完成，如何分析數(shù)據(jù)，將這些碎片化的數(shù)據(jù)系統(tǒng)化，在無序的數(shù)據(jù)和信息世界里尋找有序的連接，挖掘到可應(yīng)用的價(jià)值，是真正駕馭大數(shù)據(jù)的重要環(huán)節(jié)。一些大型網(wǎng)站將 “數(shù)據(jù)”視為最核心的資產(chǎn)，他們甚至花費(fèi)高昂的費(fèi)用來保管這些數(shù)據(jù)，以便加快用戶的訪問速度。為了支持?jǐn)?shù)據(jù)的快速讀取和并發(fā)訪問，分布式存儲(chǔ)和對(duì)象存儲(chǔ)架構(gòu)將會(huì)更有效。其中海量存儲(chǔ)包含數(shù)據(jù)容量和數(shù)據(jù)文件量?jī)蓚€(gè)方面，為保障系統(tǒng)存儲(chǔ)容量能夠以較低成本存儲(chǔ)海量數(shù)據(jù)并能實(shí)現(xiàn)快速平滑擴(kuò)展，分布式存儲(chǔ)和存儲(chǔ)虛擬化技術(shù)被廣泛采用；為更好的對(duì)系統(tǒng)中海量文件進(jìn)行有效管理，將數(shù)據(jù)傳輸和數(shù)據(jù)控制分離開的對(duì)象存儲(chǔ)架構(gòu)應(yīng)用廣泛。由于現(xiàn)實(shí)采集的數(shù)據(jù)與大數(shù)據(jù)分析過程中所需的數(shù)據(jù)，會(huì)存在結(jié)構(gòu)不一致或不完整的情況，大數(shù)據(jù)預(yù)處理過程可以通過數(shù)據(jù)提取、轉(zhuǎn)換和加載等操作，對(duì)采集的數(shù)據(jù)進(jìn)行初步的組織和數(shù)量，從而提高大數(shù)據(jù)分析質(zhì)量和效率。社交網(wǎng)絡(luò)使得互聯(lián)網(wǎng)甚至具備某些人類的特質(zhì)，譬如“情緒”：人們分享各自的喜怒哀樂，并相互傳染傳播。（2）“大數(shù)據(jù)”與社交網(wǎng)絡(luò)社交網(wǎng)絡(luò)是互聯(lián)網(wǎng)發(fā)展史上一個(gè)重要的里程碑。這些不同類型的傳感器，無時(shí)無刻不在產(chǎn)生大量的數(shù)據(jù)，這些成為大數(shù)據(jù)的重要來源之一。遍布大街小巷的攝像頭，是大家可以直觀感受到的一種物聯(lián)網(wǎng)形態(tài)。下面就物聯(lián)網(wǎng)及社交網(wǎng)絡(luò)這兩個(gè)“大數(shù)據(jù)”的新型來源進(jìn)行簡(jiǎn)單的介紹。按照數(shù)據(jù)所有者劃分，企業(yè)數(shù)據(jù)采集源可以分成3類：一類是企業(yè)和機(jī)構(gòu)的內(nèi)部數(shù)據(jù)，如系統(tǒng)日志、生產(chǎn)經(jīng)營(yíng)數(shù)據(jù)等；一類是合作機(jī)構(gòu)的內(nèi)部數(shù)據(jù)，可以通過設(shè)定好企業(yè)與合作機(jī)構(gòu)的系統(tǒng)接口進(jìn)行采集；還有一類是大量的網(wǎng)絡(luò)公開數(shù)據(jù)，可以通過網(wǎng)絡(luò)爬蟲或者網(wǎng)站公開的應(yīng)用開發(fā)接口（API）將所需信息從網(wǎng)頁(yè)中采集出來。“大數(shù)據(jù)”的采集和預(yù)處理在數(shù)據(jù)分析界有著一個(gè)“拇指法則”，即數(shù)據(jù)分析工作至少有70%~80%的時(shí)間都花在搜集和準(zhǔn)備數(shù)據(jù)上，而僅有20%~30%的時(shí)間花在分析本身上。而隨著“大數(shù)據(jù)”在越來越多的領(lǐng)域得到應(yīng)用，“大數(shù)據(jù)”也變得越來越復(fù)雜，因此“大數(shù)據(jù)”處理技術(shù)在大數(shù)據(jù)領(lǐng)域就顯得尤為重要，可以說是決定最終信息是否有價(jià)值的決定性因素。如，在大數(shù)據(jù)的幫助下，什么時(shí)間段、哪條路擁堵等問題，都可以通過分析得知，通過同一條路上多個(gè)用戶的手機(jī)位移速度，便可以判斷當(dāng)時(shí)的路況，為擁堵做出準(zhǔn)確預(yù)警。第四是創(chuàng)新社會(huì)管理。第三是個(gè)性化精準(zhǔn)推薦。企業(yè)可以利用用戶數(shù)據(jù)，有