【正文】 研究。輿情監(jiān)控本身就無(wú)法發(fā)揮大數(shù)據(jù)的商業(yè)應(yīng)用優(yōu)勢(shì)，反而阻礙大數(shù)據(jù)產(chǎn)業(yè)的商業(yè)應(yīng)用。目前了解到的信息是上海政府計(jì)劃建設(shè)大數(shù)據(jù)產(chǎn)業(yè)園，通過(guò)政府自身投資來(lái)建立大數(shù)據(jù)平臺(tái)，吸引中小企業(yè)將信息系統(tǒng)及數(shù)據(jù)放到政府主導(dǎo)的數(shù)據(jù)平臺(tái)上，政府將利用此平臺(tái)來(lái)挖掘數(shù)據(jù)信息，提供數(shù)據(jù)信息報(bào)告。美國(guó)奧巴馬政府宣布投資大數(shù)據(jù)領(lǐng)域，是大數(shù)據(jù)從商業(yè)行為上升到國(guó)家戰(zhàn)略的分水嶺，表明大數(shù)據(jù)正式提升到戰(zhàn)略層面，大數(shù)據(jù)在經(jīng)濟(jì)社會(huì)各個(gè)層面、各個(gè)領(lǐng)域都開(kāi)始受到重視。八、中國(guó)的大數(shù)據(jù)之路任重而道遠(yuǎn)中國(guó)目前的大數(shù)據(jù)應(yīng)用環(huán)境和技術(shù)相對(duì)于美國(guó)而言，在整體技術(shù)水平、應(yīng)用環(huán)境、國(guó)民意識(shí)、商業(yè)環(huán)境、技術(shù)廠商、技術(shù)平臺(tái)上面相差超過(guò)5年左右。4）有些領(lǐng)域不能過(guò)度依靠參考數(shù)據(jù)，還應(yīng)該從尊重生命出發(fā)如食品安全管理問(wèn)題等。1）數(shù)據(jù)不能起到?jīng)Q定作用，僅應(yīng)提供輔助決策。大數(shù)據(jù)和其他的新鮮事物一樣，它不是神，不可能天生沒(méi)有缺陷，不可能天生沒(méi)有風(fēng)險(xiǎn)，我們要正視大數(shù)據(jù)時(shí)代的弊端，在享受大數(shù)據(jù)時(shí)代的紅利時(shí)，希望能夠認(rèn)清其弊端，不要成為數(shù)據(jù)的奴隸，不要成為Matrix的營(yíng)養(yǎng)品。不要使用針對(duì)個(gè)體的數(shù)據(jù)，同時(shí)在數(shù)據(jù)分析是需要注意關(guān)注隱私數(shù)據(jù)保護(hù)。大數(shù)據(jù)企業(yè)應(yīng)該在其公司的章程和文件中體現(xiàn)對(duì)個(gè)人隱私數(shù)據(jù)的保護(hù)，堅(jiān)持遵守全球隱私保護(hù)7條原則；1)知曉權(quán)（透明性）：應(yīng)該通知本人關(guān)于所收集信息的目的2)選擇權(quán)：提供機(jī)會(huì)選擇或放棄所提供的個(gè)人信息是否被使用或如何被使用3)同意權(quán)：再符合知曉權(quán)和選擇權(quán)的情況下才可以向第三方透露個(gè)人數(shù)據(jù)信息4)安全權(quán)：采取負(fù)責(zé)的措施保護(hù)個(gè)人信息免受丟失、濫用、未授權(quán)獲取、泄露、篡改、毀壞的威脅5)數(shù)據(jù)完整性：確保個(gè)人信息在最終用途、合理防護(hù)方面的可靠性，確保信息精確、完整、無(wú)誤。過(guò)度強(qiáng)調(diào)隱私保護(hù)而不發(fā)展大數(shù)據(jù)產(chǎn)業(yè)也是一個(gè)錯(cuò)誤的選擇，人類(lèi)可能會(huì)錯(cuò)失一個(gè)高速發(fā)展的機(jī)遇。由于目前大數(shù)據(jù)產(chǎn)業(yè)的商業(yè)模式和盈利模式還在探索之中，大數(shù)據(jù)帶來(lái)的直接收益還沒(méi)有明確，目前主要的商業(yè)形式還是大數(shù)企業(yè)自身的大數(shù)據(jù)應(yīng)用（例如，大數(shù)據(jù)計(jì)算平臺(tái)，大數(shù)據(jù)采集和分析，數(shù)據(jù)分析報(bào)告），行業(yè)應(yīng)用處于一個(gè)探索的階段，在大數(shù)據(jù)較為集中的電信行業(yè)，并沒(méi)有成立數(shù)據(jù)事業(yè)部，數(shù)據(jù)被當(dāng)作資產(chǎn)良好的保存起來(lái)，國(guó)外的大數(shù)據(jù)投資`在2005年就開(kāi)始了，很多高科技企業(yè)已經(jīng)大數(shù)產(chǎn)業(yè)鏈上投入巨資進(jìn)行技術(shù)開(kāi)發(fā)和行業(yè)應(yīng)用。SAN存儲(chǔ)由于成本過(guò)高，不建議用于大數(shù)據(jù)存儲(chǔ)，但是土豪除外。數(shù)據(jù)的存儲(chǔ)主要是指利用何種方式進(jìn)行數(shù)據(jù)存貯，對(duì)于中小企業(yè)，云存儲(chǔ)是以個(gè)不錯(cuò)的原則，對(duì)于金融行業(yè)和其他對(duì)數(shù)據(jù)保有權(quán)較為重視的企業(yè)，私有云將是一個(gè)不錯(cuò)的選擇。但是從數(shù)據(jù)的收集，存貯，處理，分析，銷(xiāo)毀等方面分析，可以形成大數(shù)據(jù)產(chǎn)業(yè)鏈。國(guó)內(nèi)的互聯(lián)網(wǎng)企業(yè)在大數(shù)據(jù)應(yīng)用和研發(fā)方面處于較好的水平例如淘寶、百度、騰訊、新浪等。8)日志應(yīng)用主要產(chǎn)品有Splunk、Loggly、SumoLogic。主流的大數(shù)據(jù)廠商分為大數(shù)據(jù)分析基礎(chǔ)設(shè)施，大數(shù)據(jù)操作基礎(chǔ)設(shè)施，大數(shù)據(jù)基礎(chǔ)云服務(wù)，傳統(tǒng)結(jié)構(gòu)化數(shù)據(jù)庫(kù)，商業(yè)智能，可視化領(lǐng)域等，下面將一一介紹。HDFS將數(shù)據(jù)分成若干片段后分布存儲(chǔ)在集群中的不同服務(wù)器上。Hadoop主要特點(diǎn)是，運(yùn)行在標(biāo)準(zhǔn)硬件之上的Hadoop可以以傳統(tǒng)解決方案1/10的成本從海量的數(shù)分析分析復(fù)雜問(wèn)題，可以勝任收搜索系統(tǒng)、登錄系統(tǒng)、推薦系統(tǒng)、數(shù)據(jù)倉(cāng)庫(kù)、語(yǔ)音/圖像分析等。四、大數(shù)據(jù)技術(shù)及廠商由于本篇文章主要的目的是進(jìn)行大數(shù)據(jù)知識(shí)普及，因此在大數(shù)據(jù)技術(shù)和平臺(tái)方面就不進(jìn)行深入探討，主要介紹一些典型的大數(shù)據(jù)技術(shù)和行業(yè)解決方案，具體的大家可以參考趙剛老師的《大數(shù)據(jù)技術(shù)與應(yīng)用實(shí)踐指南》，（MichaelMinelli）《大數(shù)據(jù)分析決生互連網(wǎng)金融時(shí)代》（BIGDATABIGANALYTICS）。社交媒體和朋友圈正成為追蹤人們社會(huì)行為的平臺(tái)，正能量的東西有，負(fù)能量的東西也不少。政府運(yùn)作效率的提升，決策的科學(xué)客觀，財(cái)政支出合理透明都將大大提升國(guó)家整體實(shí)力，成為國(guó)家競(jìng)爭(zhēng)優(yōu)勢(shì)。5）宏觀調(diào)控和財(cái)政支出政府利用大數(shù)據(jù)技術(shù)可以了解各地區(qū)的經(jīng)濟(jì)發(fā)展情況，各產(chǎn)業(yè)發(fā)展情況，消費(fèi)支出和產(chǎn)品銷(xiāo)售情況，依據(jù)數(shù)據(jù)分析結(jié)果，科學(xué)地制定宏觀政策，平衡各產(chǎn)業(yè)發(fā)展，避免產(chǎn)能過(guò)剩，有效利用自然資源和社會(huì)資源，提高社會(huì)生產(chǎn)效率。在數(shù)據(jù)驅(qū)動(dòng)下，采集人們?cè)诨ヂ?lián)網(wǎng)上提供的舉報(bào)信息，國(guó)家可以掌握部分鄉(xiāng)村和城市的死角信息，挖出不法加工點(diǎn)，提高執(zhí)法透明度，降低執(zhí)法成本。在數(shù)據(jù)驅(qū)動(dòng)下，結(jié)合無(wú)人機(jī)技術(shù)，農(nóng)民可以采集農(nóng)產(chǎn)品生長(zhǎng)信息，病蟲(chóng)害信息。過(guò)去出現(xiàn)的豬肉過(guò)剩、卷心菜過(guò)剩、香蕉過(guò)剩的原因就是農(nóng)牧業(yè)沒(méi)有規(guī)劃好。2）天氣預(yù)報(bào)借助于大數(shù)據(jù)技術(shù)，天氣預(yù)報(bào)的準(zhǔn)確性和實(shí)效性將會(huì)大大提高，預(yù)報(bào)的及時(shí)性將會(huì)大大提升，同時(shí)對(duì)于重大自然災(zāi)害，例如龍卷風(fēng)，通過(guò)大數(shù)據(jù)計(jì)算平臺(tái)，人們將會(huì)更加精確地了解其運(yùn)動(dòng)軌跡和危害的等級(jí)，有利于幫助人們提高應(yīng)對(duì)自然災(zāi)害的能力?？茖W(xué)的信號(hào)燈安排將會(huì)提高30％左右已有道路的通行能力。依托于大數(shù)據(jù)和大數(shù)據(jù)技術(shù)，政府可以及時(shí)得到更加準(zhǔn)確信息，利用這些信息，政府可以更加高效的管理國(guó)家這部機(jī)器，實(shí)現(xiàn)精細(xì)化資源配置和宏觀調(diào)控。三、大數(shù)據(jù)的政府應(yīng)用場(chǎng)景大數(shù)據(jù)另外一個(gè)重要應(yīng)用領(lǐng)域就是在政府。同時(shí)大數(shù)據(jù)的分析將會(huì)更見(jiàn)精確預(yù)測(cè)未來(lái)的天氣氣候，幫助農(nóng)牧民做好自然災(zāi)害的預(yù)防工作。電商可以利用其交易數(shù)據(jù)和現(xiàn)金流數(shù)據(jù)，為其生態(tài)圈內(nèi)的商戶提供基于現(xiàn)金流的小額貸款，電商業(yè)也可以將此數(shù)據(jù)提供給銀行，同銀行合作為中小企業(yè)提供信貸支持。另外零售行業(yè)可以通過(guò)大數(shù)據(jù)掌握未來(lái)消費(fèi)趨勢(shì)，有利于熱銷(xiāo)商品的進(jìn)貨管理和過(guò)季商品的處理。3）金融行業(yè)大數(shù)據(jù)在金融行業(yè)應(yīng)用范圍較廣，典型的案例有花旗銀行利用IBM沃森電腦為財(cái)富管理客戶推薦產(chǎn)品，美國(guó)銀行利用客戶點(diǎn)擊數(shù)據(jù)集為客戶提供特色服務(wù)，如有競(jìng)爭(zhēng)的信用額度。2）生物技術(shù)主要是指大數(shù)據(jù)技術(shù)在基因分析上的應(yīng)用，通過(guò)大數(shù)據(jù)平臺(tái)人類(lèi)可以將自身和生物體基因分析的結(jié)果進(jìn)行記錄和存儲(chǔ)，利用建立基于大數(shù)據(jù)技術(shù)的基因數(shù)據(jù)庫(kù)。同時(shí)這些數(shù)據(jù)也有利于醫(yī)藥行業(yè)開(kāi)發(fā)出更加有效的藥物和醫(yī)療器械。在未來(lái)，借助于大數(shù)據(jù)平臺(tái)我們可以收集不同病例和治療方案，以及病人的基本特征，可以建立針對(duì)疾病特點(diǎn)的數(shù)據(jù)庫(kù)。1）醫(yī)療行業(yè)醫(yī)療行業(yè)擁有大量的病例，病理報(bào)告，治愈方案，藥物報(bào)告等等。各國(guó)政府和企業(yè)將借助于大數(shù)據(jù)來(lái)了解民眾需求，拋棄過(guò)去的經(jīng)驗(yàn)思維和慣性思維，掌握客觀規(guī)律，跳出歷史預(yù)測(cè)未來(lái)的困境?？梢哉f(shuō)大數(shù)據(jù)的一個(gè)重要作用就是將人類(lèi)行為數(shù)據(jù)進(jìn)行收集分析，了解人類(lèi)行為特點(diǎn)，為數(shù)據(jù)價(jià)值的商業(yè)運(yùn)用提供基礎(chǔ)資產(chǎn)5）大數(shù)據(jù)改變過(guò)去的經(jīng)驗(yàn)思維，幫助人們建立數(shù)據(jù)思維人類(lèi)社會(huì)的發(fā)展一直都在依賴(lài)著數(shù)據(jù)，無(wú)論是各國(guó)文明的演化，農(nóng)業(yè)的規(guī)劃，工業(yè)的發(fā)展，軍事戰(zhàn)役及政治事件等。利用大數(shù)據(jù)提供的分析結(jié)果來(lái)歸納和演繹出事物的發(fā)展規(guī)律，通過(guò)掌握事物發(fā)展規(guī)律來(lái)幫助人們進(jìn)行科學(xué)決策，大數(shù)據(jù)時(shí)代的精準(zhǔn)營(yíng)銷(xiāo)就是典型的應(yīng)用。大數(shù)據(jù)帶來(lái)的統(tǒng)計(jì)結(jié)果將糾正過(guò)去人們對(duì)事物錯(cuò)誤的認(rèn)識(shí)，影響過(guò)去人類(lèi)行為、社會(huì)行為的結(jié)論，帶來(lái)全新的認(rèn)知。我們都知道效率提升是人類(lèi)社會(huì)進(jìn)步的典型標(biāo)志，可以推斷大數(shù)據(jù)技術(shù)將帶領(lǐng)人類(lèi)社會(huì)進(jìn)入另外一個(gè)階段。一、大數(shù)據(jù)時(shí)代帶給我們的思考1）大數(shù)據(jù)計(jì)算提高數(shù)據(jù)處理效率，增加人類(lèi)認(rèn)知盈余大數(shù)據(jù)技術(shù)就像其他的技術(shù)革命一樣，是從效率提升入手。6）傳統(tǒng)的互聯(lián)網(wǎng)入口轉(zhuǎn)向搜索引擎之后，用戶的搜索行為和提問(wèn)行為聚集了海量數(shù)據(jù)?；诘貓D產(chǎn)生的數(shù)據(jù)流是一種新型的數(shù)據(jù)類(lèi)型，在過(guò)去是不存在的。舉個(gè)例子Facebook每天有18億張照片上傳或被傳播，形成了海量的數(shù)據(jù)。確切的說(shuō)是移動(dòng)互聯(lián)網(wǎng)、物聯(lián)網(wǎng)產(chǎn)生了海量的數(shù)據(jù)，大數(shù)據(jù)計(jì)算技術(shù)完美地解決了海量數(shù)據(jù)的收集、存儲(chǔ)、計(jì)算、分析的問(wèn)題。大數(shù)據(jù)時(shí)代的出現(xiàn)簡(jiǎn)單的講是海量數(shù)據(jù)同完美計(jì)算能力結(jié)合的結(jié)果?，F(xiàn)在這些數(shù)據(jù)不但數(shù)據(jù)量巨大，并且共享到了互聯(lián)網(wǎng)上，面對(duì)所有互聯(lián)網(wǎng)用戶，其數(shù)量之大是前所未有。3）電子地圖如高德、百度、Google地圖出現(xiàn)后，其產(chǎn)生了大量的數(shù)據(jù)流數(shù)據(jù)，這些數(shù)據(jù)不同于傳統(tǒng)數(shù)據(jù)，傳統(tǒng)數(shù)據(jù)代表一個(gè)屬性或一個(gè)度量值，但是這些地圖產(chǎn)生的流數(shù)據(jù)代表著一種行為、一種習(xí)慣，這些流數(shù)據(jù)經(jīng)頻率分析后會(huì)產(chǎn)生巨大的商業(yè)價(jià)值。5）電商戶崛起產(chǎn)來(lái)了大量網(wǎng)上交易數(shù)據(jù)，包含支付數(shù)據(jù)，查詢(xún)行為，物流運(yùn)輸、購(gòu)買(mǎi)喜好，點(diǎn)擊順序，評(píng)價(jià)行為等，其是信息流和資金流數(shù)據(jù)。大數(shù)據(jù)更接近于某個(gè)群體行為數(shù)據(jù)，它是全面的數(shù)據(jù)、準(zhǔn)確的數(shù)據(jù)、有價(jià)值的數(shù)據(jù)。大數(shù)據(jù)的高效計(jì)算能力，為人類(lèi)節(jié)省了更多的時(shí)間。2）大數(shù)據(jù)通過(guò)全局的數(shù)據(jù)讓人類(lèi)了解事物背后的真相相對(duì)于過(guò)去的樣本代替全體的統(tǒng)計(jì)方法，大數(shù)據(jù)將使用全局的數(shù)據(jù)，其統(tǒng)計(jì)出來(lái)的結(jié)果更為精確，更接事物真相，幫助科學(xué)家了解事物背后的真相。3）大數(shù)據(jù)有助于了解事物發(fā)展的客觀規(guī)律，利于科學(xué)決策大數(shù)據(jù)收集了全局的數(shù)據(jù)，準(zhǔn)確的數(shù)據(jù)，通過(guò)大數(shù)據(jù)計(jì)算統(tǒng)計(jì)出了解事物發(fā)展過(guò)程中的真相，通過(guò)數(shù)據(jù)分析出解人類(lèi)社會(huì)的發(fā)展規(guī)律，自然界發(fā)展規(guī)律。大數(shù)據(jù)技術(shù)連接了人類(lèi)行為，通過(guò)大數(shù)據(jù)將人類(lèi)的行為數(shù)據(jù)收集起來(lái)，經(jīng)過(guò)一定的分析后來(lái)統(tǒng)計(jì)人類(lèi)行為，幫助我們了解人類(lèi)的行為。依靠大數(shù)據(jù)提供的數(shù)據(jù)分析報(bào)告，人們將會(huì)發(fā)現(xiàn)決定一件事、判斷一件事、了解一件事不再變得困難。大數(shù)據(jù)的應(yīng)用可以分為企業(yè)應(yīng)用和政府應(yīng)用，其關(guān)注點(diǎn)有所不同