企業(yè)大數(shù)據(jù)解決方案(參考版)
2025-03-10 03:08本頁(yè)面
【正文】 2023 Zejia Consulting Corporation 第 42 頁(yè) 大數(shù)據(jù)發(fā)展企業(yè)占位圖 大數(shù)據(jù)按照信息處理環(huán)節(jié)可以分為數(shù)據(jù)采集、數(shù)據(jù)清理、數(shù)據(jù)存儲(chǔ)及管理、數(shù)據(jù)分析、數(shù)據(jù)顯化，以及產(chǎn)業(yè)應(yīng)用等六個(gè)環(huán)節(jié)。2023 Zejia Consulting Corporation 第 40 頁(yè) 騰 訊基于大數(shù)據(jù)平臺(tái)的產(chǎn)品應(yīng)用 2023 北京澤佳公司版權(quán)所有 Copyright169。2023 Zejia Consulting Corporation 第 39 頁(yè) 騰 訊大數(shù)據(jù)的多樣性 騰訊數(shù)據(jù)平臺(tái)已經(jīng)接入 100多個(gè)產(chǎn)品的各類數(shù)據(jù)，例如：用戶行為、賬號(hào)屬性、收入數(shù)據(jù)等等。用戶畫像分析任務(wù)為 ，可以看出騰訊對(duì)用戶畫像的重視程度。騰訊員工 2萬(wàn)多人，騰訊數(shù)據(jù)門戶的月活躍是 2500左右，也就是說(shuō)訪問(wèn)騰訊數(shù)據(jù)門戶的人占比公司10%+。日新增數(shù)據(jù) 200TB+，月數(shù)據(jù)增長(zhǎng)率 10%，日均 JOB數(shù) 100萬(wàn)，日均計(jì)算量 5PB，量夠大，速度也夠 快。2023 Zejia Consulting Corporation 第 38 頁(yè) 騰 訊大數(shù)據(jù)現(xiàn)狀 從 業(yè)務(wù) 角度看 ：騰 訊數(shù)據(jù)平臺(tái)自研的 TDW替換了商業(yè)數(shù)據(jù)庫(kù)，實(shí)現(xiàn)公司級(jí)數(shù)據(jù)集中存儲(chǔ)，總記錄達(dá)到 375萬(wàn)億跳，日接入 5千億條，覆蓋移動(dòng)設(shè)備數(shù) 。 互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)分析面臨的主要問(wèn)題 2023 北京澤佳公司版權(quán)所有 Copyright169。 ?互聯(lián)網(wǎng)行業(yè)對(duì)數(shù)據(jù)實(shí)時(shí)分析要求較高，例如廣告監(jiān)測(cè)、 B2C業(yè)務(wù)，往往要求在數(shù)秒內(nèi)返回上億行數(shù)據(jù)的分析，從而達(dá)到不影響用戶體驗(yàn)和快速準(zhǔn)確營(yíng)銷的目的。2023 Zejia Consulting Corporation 第 36 頁(yè) 互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)需求分析 網(wǎng)絡(luò)終端設(shè)備 ?網(wǎng)絡(luò)技術(shù)的升級(jí)和終端設(shè)備的爆發(fā)，使今天的用戶能夠使用多種設(shè)備、從不同位置、通過(guò)多種手段來(lái)接入互聯(lián)網(wǎng)，并在這一過(guò)程中不斷創(chuàng)造新內(nèi)容 在線應(yīng)用和服務(wù) ?越來(lái)越豐富的在線應(yīng)用和服務(wù)，不斷激勵(lì)用戶創(chuàng)造和分享信息，尤其是社會(huì)化媒體業(yè)務(wù)，帶動(dòng)圖片、視頻等非結(jié)構(gòu)化數(shù)據(jù)飛速增長(zhǎng) 與各垂直行業(yè)的融合 ?互聯(lián)網(wǎng)作為一個(gè)高滲透力的行業(yè)，正在與各垂直行業(yè)發(fā)生深度的融合，原本隱藏于先下的孤島信息，源源不斷的輸入到線上。2023 Zejia Consulting Corporation 第 35 頁(yè) 大數(shù)據(jù)行業(yè)應(yīng)用分析 應(yīng)用可能性 電信 政府（公共事業(yè)） 交通 金融 醫(yī)療 教育 能源（電力 /石油） ? 縱軸契合度： 表示該用戶的 IT應(yīng)用特點(diǎn)與大數(shù)據(jù)特性的契合程度； ? 橫軸應(yīng)用可能性 ：表示該用戶出于主客觀因素在短期內(nèi)投資大數(shù)據(jù)的可能性； ? 注： 該位置為分析師訪談的綜合印象，為定性分析，圖中位置不代表具體數(shù)值 High Mid Low Low Mid High 優(yōu)先關(guān)注行業(yè)用戶 應(yīng)用特點(diǎn)與大數(shù)據(jù)技術(shù)有較高的契合度，在主客觀條件上也有較高的應(yīng)用可能性。 2023 Zejia Consulting Corporation 第 33 頁(yè) NoSQL產(chǎn)品 2023 北京澤佳公司版權(quán)所有 Copyright169。 ? 大數(shù)據(jù)結(jié)論的解讀和 應(yīng)用。我們認(rèn)為，真正會(huì)制約或者成為大數(shù)據(jù)發(fā)展和應(yīng)用瓶頸的有三個(gè)環(huán)節(jié) ： ? 數(shù)據(jù) 收集和提取的合法性，數(shù)據(jù)隱私的保護(hù)和數(shù)據(jù)隱私應(yīng)用之間的權(quán)衡 。 ? HLog：每次用戶操作寫入Memstore的同時(shí)，也會(huì)寫一份數(shù)據(jù)到 HLog文件 2023 北京澤佳公司版權(quán)所有 Copyright169。 2023 Zejia Consulting Corporation 第 31 頁(yè) Hbase—— 分布式數(shù)據(jù)存儲(chǔ)系統(tǒng) ? Client：使用 HBase RPC機(jī)制與HMaster和 HRegionServer進(jìn)行通信 ? Zookeeper：協(xié)同服務(wù)管理，HMaster通過(guò) Zookeepe可以隨時(shí)感知各個(gè) HRegionServer的健康狀況 ? HMaster: 管理用戶對(duì)表的增刪改查操作 ? HR
環(huán)評(píng)公示相關(guān)推薦
鄂ICP備17016276號(hào)-1