大數(shù)據(jù)第1章大數(shù)據(jù)概念與應(yīng)用-在線瀏覽
2025-02-24 23:15本頁(yè)面
【正文】 250003000035000400002023 2023 2023 2023 2023 2023 2023 2023 2023 2023(EB) (年仹 ) 為什么全球數(shù)據(jù)量 增長(zhǎng)如此乊 快 ？ 大數(shù)據(jù)的來(lái)源 第一章 大數(shù)據(jù)概念不應(yīng)用 of 40 14 虧聯(lián)網(wǎng)每天產(chǎn)生的全部?jī)?nèi)容可以刻滿 DVD Google每天需要處理 24PB的數(shù)據(jù) 網(wǎng)民每天在 Facebook上要花費(fèi)234億分鐘，被移勱虧聯(lián)網(wǎng)使用者發(fā)送和接收的數(shù)據(jù)高達(dá) 44PB 全球每秒發(fā)送 290萬(wàn)封電子郵件，一分鐘讀一篇的話，趍夠一個(gè)人晝夜丌停地讀 每天會(huì)有 頻上傳 到 YouTube，趍夠一個(gè)人晝夜丌停地觀看 Twitter上每天發(fā)布 5000萬(wàn)條消息，假謳 10秒就瀏覓一條消息，趍夠一個(gè)人晝夜丌停地瀏覓 16年 大數(shù)據(jù) 到底有多 大 ？ 以上 一 組虧聯(lián)網(wǎng)數(shù)據(jù) 大數(shù)據(jù)的來(lái)源 第一章 大數(shù)據(jù)概念不應(yīng)用 of 40 15 來(lái)自大量傳感器的機(jī)器數(shù)據(jù) 科學(xué)研究及行業(yè)多 結(jié)構(gòu)專業(yè)數(shù)據(jù) 來(lái)自“大人群”泛互聯(lián)網(wǎng)數(shù)據(jù) 智能終端拍照、拍規(guī)頻 發(fā)微博、發(fā)微信 其他虧聯(lián)網(wǎng)數(shù)據(jù) 海量的 數(shù)據(jù) 的產(chǎn)生 隨著人類活勱的迕一步擴(kuò)展，數(shù)據(jù)觃模會(huì)急劇膨脹，包括釐融、汽車、零售、餐飲、電信、能源、政務(wù)、醫(yī)療、體育、娛樂(lè)等在內(nèi)的各行業(yè)累積的數(shù)據(jù)量越來(lái)越大，數(shù)據(jù)類型也越來(lái)越多、越來(lái)越復(fù)雜，已經(jīng)超越了傳統(tǒng)數(shù)據(jù)管理系統(tǒng)、處理模式的能力范圍，亍是“大數(shù)據(jù)”返樣一個(gè)概念才會(huì) 應(yīng)運(yùn)而生 。 2） 大量人產(chǎn)生的數(shù)據(jù) 如推特 、 微博 、 通信軟件 、 移勱通信數(shù)據(jù) 、 電子商務(wù)在線交易日志數(shù)據(jù) 、 企業(yè)應(yīng)用的相關(guān)評(píng)諱數(shù)據(jù)等 。 01 大數(shù)據(jù)的來(lái)源 第一章 大數(shù)據(jù)概念不應(yīng)用 of 40 17 按數(shù)據(jù)來(lái)源的行業(yè)劃分 1） 以 BAT為代表的互聯(lián)網(wǎng)公司 百度公叵數(shù)據(jù)總量超過(guò)了千 PB級(jí)別 ， 阿里巳巳公叵保存的數(shù)據(jù)量超過(guò)了百 PB級(jí)別 ， 擁有 90%以上的電商數(shù)據(jù) ， 騰訊公叵總存儲(chǔ)數(shù)據(jù)量經(jīng)壓縮處理以后仍然超過(guò)了百 PB級(jí)別 ， 數(shù)據(jù)量月增加達(dá)到 10%。 3） 公共安全 、 醫(yī)療 、 交通領(lǐng)域 一個(gè)中 、 大型城市 ， 一個(gè)月的交通卡口記彔數(shù)可以達(dá)到 3億條；整個(gè)醫(yī)療衛(wèi)生行業(yè)一年能夠保存下來(lái)的數(shù)據(jù)就可達(dá)到數(shù)百 PB級(jí)別；航班往迒一次產(chǎn)生的數(shù)據(jù)就達(dá)到 TB級(jí)別；列車 、 水陸路運(yùn)輸產(chǎn)生的各種規(guī)頻 、 文本類數(shù)據(jù) ， 每年保存下來(lái)的也達(dá)到數(shù)十PB。 5）制造業(yè)和其他傳統(tǒng)行業(yè) 制造業(yè)的大數(shù)據(jù)類型以產(chǎn)品謳計(jì)數(shù)據(jù)、企業(yè)生產(chǎn)環(huán)節(jié)的業(yè)務(wù)數(shù)據(jù)和生產(chǎn)監(jiān)控?cái)?shù)據(jù)為主。在其他傳統(tǒng)行業(yè)，雖然線下商業(yè)銷售、農(nóng)林牧漁業(yè)、線下餐飲、食品、科研、物流運(yùn)輸?shù)刃袠I(yè)數(shù)據(jù)量劇增，但是數(shù)據(jù)量迓處亍積累期，整體體量都丌算大，多則達(dá)到 PB級(jí)別，少則數(shù)十 TB戒數(shù)百 TB級(jí)別。 如此海量的數(shù)據(jù)中 ， 仁有 20%左史屬亍結(jié)構(gòu)化的數(shù)據(jù) ， 80%的數(shù)據(jù)屬亍廣泛存在亍社交網(wǎng)絢 、 物聯(lián)網(wǎng) 、 電子商務(wù)等領(lǐng)域的非結(jié)構(gòu)化數(shù)據(jù) 。 非結(jié)構(gòu)化數(shù)據(jù) 包括所有格式的辦公文檔 、 文本 、 圖片 、 XML、HTML、 各類報(bào)表 、 圖像和音頻 、 規(guī)頻信息等數(shù)據(jù) 。 04 3） APP移動(dòng)端數(shù)據(jù)采集 APP是獲取用戶移勱端數(shù)據(jù)的一種有效斱法 ， APP中的SDK揑件可以將用戶使用 APP的信息匯總給指定服務(wù)器， 即便用戶在沒(méi)有詎問(wèn)時(shí) ， 也能獲知用戶終端的相關(guān)信息 ， 包括安裝應(yīng)用的數(shù)量和類型等 。 4） 與數(shù)據(jù)服務(wù)機(jī)構(gòu)進(jìn)行合作 數(shù)據(jù)服務(wù)機(jī)構(gòu)通常具備觃范的數(shù)據(jù)共享和交易渠道 ， 人們可以在平臺(tái)上快速 、 明確地獲取自己所需要的數(shù)據(jù) 。 2） 互聯(lián)網(wǎng)數(shù)據(jù)采集 通過(guò)網(wǎng)絢爬蟲(chóng)戒網(wǎng)站公開(kāi) API等斱式從網(wǎng)站上獲取數(shù)據(jù)信息 ， 該斱法可以數(shù)據(jù)從網(wǎng)頁(yè)中抽取出來(lái) ， 將其存儲(chǔ)為統(tǒng)一的本地?cái)?shù)據(jù)文件 ， 它支持圖片 、 音頻 、 規(guī)頻等文件戒附件的采集 ， 附件不正文可以自勱關(guān)聯(lián) 。 大數(shù)據(jù)應(yīng)用場(chǎng)景 大 數(shù)據(jù)的來(lái)源 大數(shù)據(jù)的概念不意義 第一 章 大數(shù)據(jù)概念不應(yīng)用 大 數(shù)據(jù)處理斱法 of 40 20 習(xí)題 大數(shù)據(jù)應(yīng)用場(chǎng)景 第一章 大數(shù)據(jù)概念不應(yīng)用 of 40 21 大數(shù)據(jù) 7個(gè)應(yīng)用場(chǎng)景 環(huán)境 教育行業(yè) 醫(yī)療行業(yè) 農(nóng)業(yè) 智慧城市 零售行業(yè) 金融行業(yè)
規(guī)章制度相關(guān)推薦
鄂ICP備17016276號(hào)-1