【正文】 個(gè)數(shù)據(jù)中心中的配置和無縫集成技術(shù)也將成為熱門。Hadoop的專業(yè)知識正在飛速增長，但是這方面優(yōu)秀的人才仍然很缺乏?；赟QL的Hadoop工具將會(huì)得到持續(xù)發(fā)展”。. 打包的大數(shù)據(jù)行業(yè)分析應(yīng)用隨著大數(shù)據(jù)逐漸走向各個(gè)行業(yè)，基于行業(yè)的大數(shù)據(jù)分析應(yīng)用需求也日益增長。未來幾年中針對特定行業(yè)和業(yè)務(wù)流程的分析應(yīng)用將會(huì)以預(yù)打包的形式出現(xiàn)，這將為大數(shù)據(jù)技術(shù)供應(yīng)商打開新的市場。這些分析應(yīng)用內(nèi)容還會(huì)覆蓋很多行業(yè)的專業(yè)知識，也會(huì)吸引大量行業(yè)軟件開發(fā)公司的投入。. 大數(shù)據(jù)分析的革命性方法出現(xiàn)在大數(shù)據(jù)分析上，將出現(xiàn)革命性的新方法。就像計(jì)算機(jī)和互聯(lián)網(wǎng)一樣，大數(shù)據(jù)可能是新一波技術(shù)革命。從前的很多算法和基礎(chǔ)理論可能會(huì)產(chǎn)生理論級別的突破。. 大數(shù)據(jù)與云計(jì)算:深度融合大數(shù)據(jù)處理離不開云計(jì)算技術(shù)，云計(jì)算為大數(shù)據(jù)提供彈性可擴(kuò)展的基礎(chǔ)設(shè)施支撐環(huán)境以及數(shù)據(jù)服務(wù)的高效模式，大數(shù)據(jù)則為云計(jì)算提供了新的商業(yè)價(jià)值，大數(shù)據(jù)技術(shù)與云計(jì)算技術(shù)必有更完美的結(jié)合。同樣的，云計(jì)算、物聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)等新興計(jì)算形態(tài)，既是產(chǎn)生大數(shù)據(jù)的地方，也是需要大數(shù)據(jù)分析方法的領(lǐng)域。. 大數(shù)據(jù)一體機(jī)陸續(xù)發(fā)布自云計(jì)算和大數(shù)據(jù)概念被提出后，針對該市場推出的軟硬件一體化設(shè)備就層出不窮。在未來幾年里，數(shù)據(jù)倉庫一體機(jī)、NoSQL一體機(jī)以及其它一些將多種技術(shù)結(jié)合的一體化設(shè)備將進(jìn)一步快速發(fā)展。4. 基于基站大數(shù)據(jù)應(yīng)用及案例. 氣象災(zāi)害應(yīng)急短信發(fā)布平臺(tái). 概述. 項(xiàng)目背景為有效預(yù)防、及時(shí)響應(yīng)和處置氣象災(zāi)害，保證氣象災(zāi)害應(yīng)急工作高效、有序進(jìn)行，最大限度地減輕或者避免氣象災(zāi)害造成的人員傷亡、財(cái)產(chǎn)損失以及對經(jīng)濟(jì)社會(huì)發(fā)展和生態(tài)環(huán)境保護(hù)產(chǎn)生的不利影響，將災(zāi)害信息及時(shí)通知相關(guān)人員，建設(shè)氣象災(zāi)害應(yīng)急短信發(fā)布平臺(tái)。. 平臺(tái)概述本平臺(tái)是利用手機(jī)進(jìn)出特定小區(qū)需與交換機(jī)交換位置信息的特性，結(jié)合目前移動(dòng)通信網(wǎng)絡(luò)及短消息發(fā)布平臺(tái)，實(shí)現(xiàn)在特定區(qū)域、特定時(shí)間對特定客戶群，發(fā)送特定服務(wù)短信的個(gè)性化信息服務(wù)。. 平臺(tái)建設(shè)特點(diǎn)與原則. 建設(shè)特點(diǎn)平臺(tái)具有以下特點(diǎn)：l 針對性強(qiáng)：特定區(qū)域、特定時(shí)間、特定客群、特定服務(wù)短信，投放準(zhǔn)確，不會(huì)影響特定區(qū)域外的用戶；l 收看率高：手機(jī)自動(dòng)接收，收看率高，見效快，比傳統(tǒng)媒體信息更深入用戶；l 發(fā)布便捷：客戶通過網(wǎng)絡(luò)可以直接申請發(fā)布信息，從申請到發(fā)布僅需幾小時(shí)，可以及時(shí)修改；l 成本低廉：定向發(fā)送有的放矢，平均成本更低廉。. 建設(shè)原則l 標(biāo)準(zhǔn)化：具有互操作性，可用性，可靠性，可擴(kuò)充性，可管理性，建立一個(gè)開放式，遵循國際標(biāo)準(zhǔn)的網(wǎng)絡(luò)系統(tǒng)。l 先進(jìn)性：既要保證網(wǎng)絡(luò)的先進(jìn)性，同時(shí)也要兼顧技術(shù)的成熟性。l 安全性：對于安全性我們將通過對用戶的區(qū)域劃分，建議選用專用防火墻實(shí)現(xiàn)對本地資源的安全保護(hù)。l 擴(kuò)展性：網(wǎng)絡(luò)設(shè)計(jì)必須為今后的擴(kuò)充留有足夠的余地，以保護(hù)用戶的投資，保證今后的網(wǎng)絡(luò)擴(kuò)充升級能力。l 保護(hù)投資：每個(gè)設(shè)備都進(jìn)行嚴(yán)格的選型，在滿足設(shè)計(jì)原則的功能前提下，提供最經(jīng)濟(jì)的設(shè)備配置方案。l 可管理： 先進(jìn)的網(wǎng)絡(luò)管理可為多業(yè)務(wù)網(wǎng)絡(luò)提供安全運(yùn)行的基礎(chǔ)。. 大數(shù)據(jù)管理平臺(tái)特點(diǎn)l 獨(dú)特的云任務(wù)管理技術(shù)——使系統(tǒng)的并行效率提升顯著、硬件資源被充分用于大數(shù)據(jù)處理，縮短處理時(shí)間、節(jié)約硬件成本。l 獨(dú)特的多層分布式緩存技術(shù)——使系統(tǒng)的吞吐量更大，運(yùn)算性能更高，數(shù)據(jù)更加安全可靠。l 雙引擎技術(shù)——云計(jì)算引擎與傳統(tǒng)計(jì)算引擎協(xié)同工作，使得業(yè)務(wù)支持類型更豐富、三方對接更方便、并實(shí)現(xiàn)了應(yīng)用前端到后端的大數(shù)據(jù)處理以及秒級的響應(yīng)速度。l 獨(dú)特的云目錄管理技術(shù)——使得數(shù)據(jù)存儲(chǔ)更完整，數(shù)據(jù)回收更靈活更即時(shí)，數(shù)據(jù)的近線存儲(chǔ)更方便。l 實(shí)用的監(jiān)控體系——全面監(jiān)控所有云節(jié)點(diǎn)、圖形化的指標(biāo)監(jiān)控、完備的存活與性能告警、對于分析集群工作狀態(tài)、性能瓶頸識別、故障分析提供實(shí)際數(shù)據(jù)支持。l 方便快捷的安裝——提供圖形與命令行2種安裝模式，適合本地與遠(yuǎn)程部署。部署操作基本自動(dòng)化，適合于大規(guī)模集群的快速部署安裝。. 平臺(tái)整體架構(gòu). 建設(shè)原理本平臺(tái)是通過分析移動(dòng)通訊過程中的各種信令過程，獲得用戶當(dāng)前的位置信息。當(dāng)用戶的位置信息與業(yè)務(wù)選擇發(fā)送的特定區(qū)域一致時(shí)，為用戶發(fā)布業(yè)務(wù)定制的短信。為獲得準(zhǔn)確、全面的用戶信息（當(dāng)前位置信息和用戶手機(jī)號），需要監(jiān)控業(yè)務(wù)特定區(qū)域所屬的MSC/VLR到周邊的所有信令鏈路（即下面的拓?fù)鋱D中雙向箭頭所對應(yīng)的物理鏈路）。本項(xiàng)目使用的信令數(shù)據(jù)由信令監(jiān)測系統(tǒng)定時(shí)提供。移動(dòng)通信網(wǎng)絡(luò)部分拓?fù)鋱D如下所示：BSCBTSBSCMSC/VLRHLR其它MSC/VLRLSTPBTS：基站 BSC：基站控制器MSC/VLR：移動(dòng)業(yè)務(wù)交換中心/訪問位置寄存器HLR：用戶歸屬位置寄存器LSTP：低級信令轉(zhuǎn)接點(diǎn)移動(dòng)通信網(wǎng)絡(luò)部分拓?fù)鋱D. 平臺(tái)總體設(shè)計(jì)1. 平臺(tái)總體結(jié)構(gòu)總體架構(gòu)圖系統(tǒng)主要由信令處理子系統(tǒng)、短信發(fā)送子系統(tǒng)、管理子系統(tǒng)、大數(shù)據(jù)管理平臺(tái)四部分組成。l 信令處理子系統(tǒng)本子系統(tǒng)經(jīng)過復(fù)雜的信令分析和匹配，最終得到用戶的手機(jī)號和當(dāng)前位置信息，并將這些信息保存在內(nèi)存數(shù)據(jù)庫中，并同步到關(guān)系數(shù)據(jù)庫中。l 短信發(fā)送子系統(tǒng)本子系統(tǒng)經(jīng)過對用戶手機(jī)號和位置信息的分析，以及與業(yè)務(wù)條件是否匹配，得到是否要給用戶下發(fā)短信。如果要下發(fā)短信，短信業(yè)務(wù)應(yīng)用系統(tǒng)將要下發(fā)的短信和用戶手機(jī)號寫入運(yùn)營商的10086短信下發(fā)系統(tǒng)，由10086短信下發(fā)系統(tǒng)為用戶下發(fā)信息。l 大數(shù)據(jù)管理系統(tǒng)存儲(chǔ)與用戶、位置相關(guān)的數(shù)據(jù)，供短信業(yè)務(wù)應(yīng)用系統(tǒng)判斷時(shí)使用。使系統(tǒng)的并行效率提升顯著、硬件資源被充分用于大數(shù)據(jù)處理，縮短處理時(shí)間、節(jié)約硬件成本。l 系統(tǒng)管理子系統(tǒng)本服務(wù)提供人性化的遠(yuǎn)程登陸界面服務(wù)，為客戶提供了用戶管理、權(quán)限管理、日志管理、統(tǒng)計(jì)分析、數(shù)據(jù)配置等豐富功能。氣象災(zāi)害應(yīng)急短信發(fā)布平臺(tái)采用信令數(shù)據(jù)接入、數(shù)據(jù)處理整合、頁面展示三層架構(gòu)的方式實(shí)現(xiàn)。信令數(shù)據(jù)接入主要獲取信令數(shù)據(jù)，并對數(shù)據(jù)進(jìn)行預(yù)處理。由信令監(jiān)測平臺(tái)對外提供信令數(shù)據(jù)，氣象災(zāi)害應(yīng)急短信發(fā)布平臺(tái)中的信令處理子系統(tǒng)通過網(wǎng)管DCN網(wǎng)絡(luò)與信令監(jiān)測系統(tǒng)對接，從而實(shí)現(xiàn)氣象災(zāi)害應(yīng)急短信發(fā)布平臺(tái)周期性地從信令監(jiān)測系統(tǒng)批量采集信令數(shù)據(jù)的功能，并對原始性數(shù)據(jù)進(jìn)行預(yù)處理。數(shù)據(jù)處理采用專用數(shù)據(jù)統(tǒng)計(jì)算法和數(shù)據(jù)發(fā)掘分析技術(shù)，根據(jù)實(shí)時(shí)采集到的信令接口數(shù)據(jù)，及定期更新的基站、小區(qū)、場所及號碼段數(shù)據(jù)，綜合分析各個(gè)視角的數(shù)據(jù)。頁面展現(xiàn)層具備將各種統(tǒng)計(jì)分析結(jié)果進(jìn)行圖表化、圖形化的展示，并可以多種格式導(dǎo)出。. 平臺(tái)技術(shù)思路平臺(tái)本著可靠穩(wěn)定的宗旨進(jìn)行整個(gè)系統(tǒng)的技術(shù)構(gòu)建，主要遵循以下技術(shù)思路：l 擴(kuò)展性原則：平臺(tái)具有高可擴(kuò)展性，既能適應(yīng)移動(dòng)通信網(wǎng)絡(luò)結(jié)構(gòu)、通信協(xié)議的擴(kuò)展變更，也能適應(yīng)不斷變化的應(yīng)用需求；l 模塊化設(shè)計(jì)：平臺(tái)采用模塊化設(shè)計(jì)，并構(gòu)建業(yè)務(wù)生成平臺(tái)；l 可移植性原則：平臺(tái)采用Java 開發(fā)體系，與系統(tǒng)平臺(tái)無關(guān)，確保應(yīng)用系統(tǒng)的可移植性。l 先進(jìn)性原則：平臺(tái)采用電信級設(shè)計(jì)標(biāo)準(zhǔn)，在設(shè)計(jì)思想、系統(tǒng)架構(gòu)、采用技術(shù)、選用平臺(tái)上均需要具有一定的先進(jìn)性、前瞻性，考慮一定時(shí)期內(nèi)業(yè)務(wù)的增長。l 易用性原則：提供友好的用戶操作界面，具備直觀易用的人機(jī)界面，簡化復(fù)雜操作步驟。l 穩(wěn)定性原則：具備高可靠性和高穩(wěn)定性，能夠適應(yīng)海量信令數(shù)據(jù)處理。在系統(tǒng)設(shè)計(jì)、開發(fā)和應(yīng)用時(shí)，從系統(tǒng)結(jié)構(gòu)、技術(shù)措施、軟硬件平臺(tái)、技術(shù)服務(wù)和維護(hù)響應(yīng)能力等方面綜合考慮，確保系統(tǒng)較高的性能和較少的故障率。. 旅游客源分析. 整體方案. 方案思路移動(dòng)運(yùn)營商側(cè)擁有豐富的網(wǎng)絡(luò)信令數(shù)據(jù)，用戶在每一個(gè)業(yè)務(wù)應(yīng)用和操作時(shí)，包括語音通話、收發(fā)短信等業(yè)務(wù)時(shí)，都會(huì)在網(wǎng)絡(luò)側(cè)記錄用戶相關(guān)的基站位置信息，除此之外還有用戶的主動(dòng)位置更新（更新LAI）和定期的位置更新（一般為2小時(shí)以內(nèi)），也會(huì)記錄用戶的位置信息，通過這些信令數(shù)據(jù)上下文，我們可以通過基站描點(diǎn)勾勒出用戶的活動(dòng)軌跡。在利用運(yùn)營商在旅游景區(qū)的基站信息同景區(qū)進(jìn)行有效的結(jié)合，可以實(shí)時(shí)分析各景區(qū)的移動(dòng)本網(wǎng)當(dāng)前用戶人數(shù)及本網(wǎng)當(dāng)前旅游到達(dá)總數(shù)。l 通過對用戶進(jìn)一步分析其來源的等相關(guān)情況；l 通過對用戶進(jìn)一步分析駐留時(shí)長情況；l 通過分析各個(gè)旅游景區(qū)的人流密度等相關(guān)情況；有了這部分本網(wǎng)旅游用戶的數(shù)據(jù)就可以進(jìn)一步分析有個(gè)旅游用戶相關(guān)如來源地等，以及景區(qū)相關(guān)的如景區(qū)熱度排名等相關(guān)數(shù)據(jù)，同時(shí)可以通過全省進(jìn)一步歸納熱點(diǎn)旅游線路等，下面章節(jié)會(huì)詳細(xì)的介紹。統(tǒng)計(jì)出移動(dòng)本網(wǎng)用戶數(shù)據(jù)后，可以根據(jù)移動(dòng)用戶占比情況即比例系數(shù)反推旅游景區(qū)的用戶總數(shù)，占比情況如下圖，中移動(dòng)占比在72%。. 系統(tǒng)架構(gòu)旅游客源分析應(yīng)用平臺(tái)采用信令數(shù)據(jù)采集接入、數(shù)據(jù)分析整合、頁面展示三層架構(gòu)的方式實(shí)現(xiàn)。信令數(shù)據(jù)采集接入層主要獲取信令數(shù)據(jù)，并對數(shù)據(jù)進(jìn)行預(yù)處理。本層與中興信令監(jiān)測平臺(tái)接口。數(shù)據(jù)處理層采用專用數(shù)據(jù)統(tǒng)計(jì)算法和數(shù)據(jù)發(fā)掘分析技術(shù)，根據(jù)實(shí)時(shí)采集到的信令接口數(shù)據(jù)，及定期更新的基站、小區(qū)、場所及號碼段數(shù)據(jù)，綜合分析各個(gè)視角的數(shù)據(jù)，包括統(tǒng)計(jì)區(qū)域?qū)崟r(shí)流量數(shù)據(jù)、流量總量數(shù)據(jù)、流量密度數(shù)據(jù)、流量駐留數(shù)據(jù)、景點(diǎn)流量告警等。頁面展現(xiàn)層具備將各種統(tǒng)計(jì)分析結(jié)果進(jìn)行圖表化、圖形化、地圖化的展示，并可以多種格式導(dǎo)出。同時(shí)通過界面建立同接觸渠道的接口，包括短彩信、12580接口，可以通過接口推送給商家及用戶相關(guān)的實(shí)時(shí)信息。THANKS !!!致力為企業(yè)和個(gè)人提供合同協(xié)議，策劃案計(jì)劃書，學(xué)習(xí)課件等等打造全網(wǎng)一站式需求歡迎您的下載，資料僅供參考可修改