【正文】 的背景下，很多人都在積極的抵制無底線的數(shù)字化，這種大數(shù)據(jù)和個(gè)體之間的博弈還會(huì)一直繼續(xù)下去……專家給予了我們一些如何有效保護(hù)大數(shù)據(jù)背景下隱私權(quán)的建議：1減少信息的數(shù)字化；2隱私權(quán)立法；3數(shù)字隱私權(quán)基礎(chǔ)設(shè)施（類似DRM數(shù)字版權(quán)管理）；4人類改變認(rèn)知（接受忽略過去）；5創(chuàng)造良性的信息生態(tài)；6語境化。業(yè)內(nèi)是這么形容兩者的關(guān)系：沒有大數(shù)據(jù)的信息積淀，則云計(jì)算的計(jì)算能力再強(qiáng)大，也難以找到用武之地；沒有云計(jì)算的處理能力，則大數(shù)據(jù)的信息積淀再豐富，也終究只是鏡花水月。 HDFS: Hadoop分布式文件系統(tǒng)(Distributed File System) － HDFS (HadoopDistributed File System)167。數(shù)據(jù)來源層。到目前為止，還是兩種截然不同的計(jì)算機(jī)技術(shù)領(lǐng)域：大數(shù)據(jù)存儲(chǔ)致力于研發(fā)可以擴(kuò)展至PB甚至EB級(jí)別的數(shù)據(jù)存儲(chǔ)平臺(tái)；大數(shù)據(jù)分析關(guān)注在最短時(shí)間內(nèi)處理大量不同類型的數(shù)據(jù)集。以傳感器技術(shù)，指紋識(shí)別技術(shù)，RFID技術(shù)，坐標(biāo)定位技術(shù)等為基礎(chǔ)的感知能力提升同樣是物聯(lián)網(wǎng)發(fā)展的基石。除此之外阿里巴巴還通過投資等方式掌握了部分社交數(shù)據(jù)、移動(dòng)數(shù)據(jù)。為了幫助開發(fā)者對(duì)這些數(shù)據(jù)進(jìn)行分析，QlikTech提供了對(duì)原始數(shù)據(jù)進(jìn)行可視化處理等功能的工具。但是，如果政府可以將這些數(shù)據(jù)關(guān)聯(lián)起來，并對(duì)這些數(shù)據(jù)進(jìn)行有效的關(guān)聯(lián)分析和統(tǒng)一管理，這些數(shù)據(jù)必定將獲得新生，其價(jià)值是無法估量的。對(duì)于企業(yè)的大數(shù)據(jù)，還有一種預(yù)測：隨著數(shù)據(jù)逐漸成為企業(yè)的一種資產(chǎn)，數(shù)據(jù)產(chǎn)業(yè)會(huì)向傳統(tǒng)企業(yè)的供應(yīng)鏈模式發(fā)展，最終形成“數(shù)據(jù)供應(yīng)鏈”。這個(gè)解決方案由HP Autonomy、HP Vertica、HP ArcSight 和惠普運(yùn)營管理(HP OperationsManagement)四大技術(shù)組成。3 數(shù)據(jù)的使用將只能由用戶進(jìn)行授權(quán)，數(shù)據(jù)中心可幫助監(jiān)控個(gè)人數(shù)據(jù)的整個(gè)生命周期。以IBM舉例，上一個(gè)十年，他們拋棄了PC，成功轉(zhuǎn)向了軟件和服務(wù)，而這次將遠(yuǎn)離服務(wù)與咨詢，更多地專注于因大數(shù)據(jù)分析軟件而帶來的全新業(yè)務(wù)增長點(diǎn)。216。 政府的大數(shù)據(jù)近期，奧巴馬政府宣布投資2億美元拉動(dòng)大數(shù)據(jù)相關(guān)產(chǎn)業(yè)發(fā)展，將“大數(shù)據(jù)戰(zhàn)略”上升為國家意志。 ParAccel：他們向美國執(zhí)法機(jī)構(gòu)提供了數(shù)據(jù)分析，比如對(duì)15000個(gè)有犯罪前科的人進(jìn)行跟蹤，從而向執(zhí)法機(jī)構(gòu)提供了參考性較高的犯罪預(yù)測。它對(duì)網(wǎng)頁數(shù)據(jù)的爬取、網(wǎng)頁內(nèi)容的組織和解析，通過語義分析對(duì)搜索需求的精準(zhǔn)理解進(jìn)而從海量數(shù)據(jù)中找準(zhǔn)結(jié)果，以及精準(zhǔn)的搜索引擎關(guān)鍵字廣告，實(shí)質(zhì)上就是一個(gè)數(shù)據(jù)的獲取、組織、分析和挖掘的過程。目前全球范圍內(nèi)已經(jīng)有數(shù)以十萬計(jì)的企業(yè)在通過AWS運(yùn)行自己的全部或者部分日常業(yè)務(wù)。同時(shí)，數(shù)據(jù)查詢即是通過MyFox來查詢的。 Ambari：Hadoop管理工具，可以快捷的監(jiān)控、部署、管理集群。其次，Hadoop 是高效的，因?yàn)樗圆⑿械姆绞焦ぷ鳎ㄟ^并行處理加快處理速度。 云技術(shù)大數(shù)據(jù)常和云計(jì)算聯(lián)系到一起，因?yàn)閷?shí)時(shí)的大型數(shù)據(jù)集分析需要分布式處理框架來向數(shù)十、數(shù)百或甚至數(shù)萬的電腦分配工作。說到隱私被侵犯，愛德華?斯諾登應(yīng)該占據(jù)一席之地，這位前美國中央情報(bào)局（CIA）雇員一手引爆了美國“棱鏡計(jì)劃”（PRISM）的內(nèi)幕消息。比如，建立個(gè)人的數(shù)據(jù)中心，將每個(gè)人的日常生活習(xí)慣，身體體征，社會(huì)網(wǎng)絡(luò)，知識(shí)能力，愛好性情，疾病嗜好，情緒波動(dòng)……換言之就是記錄人從出生那一刻起的每一分每一秒，將除了思維外的一切都儲(chǔ)存下來，這些數(shù)據(jù)可以被充分的利用：167。216。Target 超市以20多種懷孕期間孕婦可能會(huì)購買的商品為基礎(chǔ)，將所有用戶的購買記錄作為數(shù)據(jù)來源，通過構(gòu)建模型分析購買者的行為相關(guān)性，能準(zhǔn)確的推斷出孕婦的具體臨盆時(shí)間，這樣Target的銷售部門就可以有針對(duì)的在每個(gè)懷孕顧客的不同階段寄送相應(yīng)的產(chǎn)品優(yōu)惠卷。書中，作者提及最多的是Google如何利用人們的搜索記錄挖掘數(shù)據(jù)二次利用價(jià)值，比如預(yù)測某地流感爆發(fā)的趨勢；Amazon如何利用用戶的購買和瀏覽歷史數(shù)據(jù)進(jìn)行有針對(duì)性的書籍購買推薦，以此有效提升銷售量；Farecast如何利用過去十年所有的航線機(jī)票價(jià)格打折數(shù)據(jù)，來預(yù)測用戶購買機(jī)票的時(shí)機(jī)是否合適。我將分別從互聯(lián)網(wǎng)的大數(shù)據(jù)，政府的大數(shù)據(jù)，企業(yè)的大數(shù)據(jù)和個(gè)人的大數(shù)據(jù)四個(gè)方面來描繪大數(shù)據(jù)已經(jīng)展現(xiàn)的美好景象及即將實(shí)現(xiàn)的藍(lán)圖?！苍S，“解構(gòu)”是最好的方法。第四，處理速度快。煤炭按照性質(zhì)有焦煤、無煙煤、肥煤、貧煤等分類，而露天煤礦、深山煤礦的挖掘成本又不一樣。未來在大數(shù)據(jù)領(lǐng)域最具有價(jià)值的是兩種事物：1擁有大數(shù)據(jù)思維的人，這種人可以將大數(shù)據(jù)的潛在價(jià)值轉(zhuǎn)化為實(shí)際利益；2還未有被大數(shù)據(jù)觸及過的業(yè)務(wù)領(lǐng)域。 大數(shù)據(jù)幫助社交網(wǎng)站提供更準(zhǔn)確的好友推薦，為用戶提供更精準(zhǔn)的企業(yè)招聘信息，向用戶推薦可能喜歡的游戲以及適合購買的商品。216。還有一種職業(yè)叫人肉專家，他們負(fù)責(zé)從互聯(lián)網(wǎng)上找到一個(gè)與他們根本就無關(guān)系用戶的任意信息。第二，大數(shù)據(jù)和云計(jì)算的目標(biāo)受眾不同，云計(jì)算是CIO等關(guān)心的技術(shù)層，是一個(gè)進(jìn)階的IT解決方案。167。在云梯上，系統(tǒng)每天會(huì)對(duì)數(shù)據(jù)產(chǎn)品進(jìn)行不同的MapReduce計(jì)算。以Amazon舉例，Amazon S3 是一種面向 Internet 的存儲(chǔ)服務(wù)。就像一句名言所說，“人類以前延續(xù)的是文明，現(xiàn)在傳承的是信息。 Metamarkets：這家公司對(duì)Twitter、支付、簽到和一些與互聯(lián)網(wǎng)相關(guān)的問題進(jìn)行了分析，為客戶提供了很好的數(shù)據(jù)分析支持。 TellApart：TellApart和電商公司進(jìn)行合作，他們會(huì)根據(jù)用戶的瀏覽行為等數(shù)據(jù)進(jìn)行分析，通過鎖定潛在買家方式提高電商企業(yè)的收入。在城市規(guī)劃方面，通過對(duì)城市地理、氣象等自然信息和經(jīng)濟(jì)、社會(huì)、文化、人口等人文社會(huì)信息的挖掘，可以為城市規(guī)劃提供決策，強(qiáng)化城市管理服務(wù)的科學(xué)性和前瞻性。”然而，一直做企業(yè)服務(wù)的巨頭將優(yōu)勢不在，不得不眼看新興互聯(lián)網(wǎng)企業(yè)加入戰(zhàn)局，開啟殘酷競爭模式。 個(gè)人的大數(shù)據(jù)個(gè)人的大數(shù)據(jù)這個(gè)概念很少有人提及，簡單來說，就是與個(gè)人相關(guān)聯(lián)的各種有價(jià)值數(shù)據(jù)信息被有效采集后，可由本人授權(quán)提供第三方進(jìn)行處理和使用，并獲得第三方提供的數(shù)據(jù)服務(wù)。用戶可確定哪些個(gè)人數(shù)據(jù)可被采集，并通過可穿戴設(shè)備或植入芯片等感知技術(shù)來采集捕獲個(gè)人的大數(shù)據(jù)，比如，牙齒監(jiān)控?cái)?shù)據(jù)，心率數(shù)據(jù)，體溫?cái)?shù)據(jù)，視力數(shù)據(jù)，記憶能力，地理位置信息，社會(huì)關(guān)系數(shù)據(jù)，運(yùn)動(dòng)數(shù)據(jù)，飲食數(shù)據(jù)，購物數(shù)據(jù)等等。大數(shù)據(jù)到來前，這兩類公司彼此之間基本是井水不犯河水；但在當(dāng)前這個(gè)大數(shù)據(jù)時(shí)代，這兩類公司已經(jīng)開始直接競爭。在輿情監(jiān)控方面，通過網(wǎng)絡(luò)關(guān)鍵詞搜索及語義智能分析，能提高輿情分析的及時(shí)性、全面性，全面掌握社情民意，提高公共服務(wù)能力，應(yīng)對(duì)網(wǎng)絡(luò)突發(fā)的公共事件，打擊違法犯罪。 DataSift：DataSift主要收集并分析社交網(wǎng)絡(luò)媒體上的數(shù)據(jù)，并幫助品牌公司掌握突發(fā)新聞的輿論點(diǎn)，并制定有針對(duì)性的營銷方案。 Tableau：他們的精力主要集中于將海量數(shù)據(jù)以可視化的方式展現(xiàn)出來。 互聯(lián)網(wǎng)的大數(shù)據(jù)互聯(lián)網(wǎng)上的數(shù)據(jù)每年增長50%，每兩年便將翻一番，而目前世界上90%以上的數(shù)據(jù)是最近幾年才產(chǎn)生的。Amazon S3 提供一個(gè)簡明的 Web 服務(wù)界面，用戶可通過它隨時(shí)在 Web 上的任何位置存儲(chǔ)和檢索的任意大小