【正文】 細描述所采用的技術(shù)及方法等。1） 可存貯至少三個月的歷史數(shù)據(jù)；2） 可通過統(tǒng)一的系統(tǒng)界面監(jiān)測所有服務(wù)器的運行狀況，及時發(fā)現(xiàn)并處理出現(xiàn)的任何狀況；3） 具有完整的容災(zāi)備份方案。 建設(shè)****輿網(wǎng)絡(luò)輿情監(jiān)測系統(tǒng)，以達到輿情監(jiān)測與分析應(yīng)對工作全面覆蓋、有序管理、多方聯(lián)動的效果?？商峁㏄B級的海量數(shù)據(jù)存儲能力，能夠利用云數(shù)據(jù)分析技術(shù)進行深度比對、關(guān)聯(lián)、分析和挖掘，實現(xiàn)網(wǎng)上信息的快速發(fā)現(xiàn) 。（2）中文分詞：采用基于自然語言處理技術(shù)的中文分詞技術(shù)，對全文做文本處理，為輿情分類、專題聚類、自動摘要、語義分析、檢索等提供基礎(chǔ)。冗余的方式通過任務(wù)分解和集群，用低配機器替代超級計算機的性能來保證低成本，這種方式保證分布式數(shù)據(jù)的高可用、高可靠和經(jīng)濟性，即為同一份數(shù)據(jù)存儲多個副本。5. 云計算平臺管理技術(shù) 云計算資源規(guī)模龐大，服務(wù)器數(shù)量眾多并分布在不同的地點，同時運行著數(shù)百種應(yīng)用，如何有效的管理這些服務(wù)器，保證整個系統(tǒng)提供不間斷的服務(wù)是巨大的挑戰(zhàn)。大數(shù)處理軟件是一款完全分布式、多副本機制、數(shù)據(jù)分片的集群系統(tǒng)，不存在單點故障或性能瓶頸。輿情衛(wèi)士監(jiān)測平臺同樣是采用大數(shù)據(jù)、移動互聯(lián)網(wǎng)等新技術(shù)進行建設(shè)，一可以保證整體輿情工作效率，同時還為未來應(yīng)用留下了發(fā)展空間。 數(shù)據(jù)中心簡介數(shù)據(jù)中心主要包括以下子系統(tǒng)：互聯(lián)網(wǎng)海量信息采集子系統(tǒng)、海量信息存儲子系統(tǒng)、海量信息檢索子系統(tǒng)、展示子系統(tǒng)、信息分析分發(fā)子系統(tǒng)、網(wǎng)評子系統(tǒng)、數(shù)據(jù)存儲與容災(zāi)備份等。定點采集可確保第一時間采集到重點網(wǎng)站的信息，全網(wǎng)搜索可進行傳播全面性的補充采集；1）定點采集：系統(tǒng)內(nèi)置的50萬欄目，采用定點采集方式；2）全網(wǎng)搜索：通過關(guān)鍵詞對新聞類搜索引擎、論壇類搜索引擎、博客類搜索引擎、微博類搜索引擎及大型網(wǎng)站的站內(nèi)搜索工具的信息聚合搜索；3）內(nèi)嵌腳本執(zhí)行引擎：，腳本語言越來越多地應(yīng)用于論壇、新聞評論、博客等類型網(wǎng)站的建設(shè)。利用MongoDB來一體化解決采集文章數(shù)據(jù)（高并發(fā)）存儲和相關(guān)的查詢統(tǒng)計業(yè)務(wù)（如歷史文章查詢），并解決存儲服務(wù)的長期運營的高可用性問題。時效性指的是一個資源的數(shù)據(jù)從修改到生效需要的時間，時效性高表示生效時間短，有的資源甚至需要立即生效；而生效時間長的資源也會分成很多檔次，有小時級的，有天級的，甚至有更長時間的靜態(tài)資源?；ヂ?lián)網(wǎng)云數(shù)據(jù)分析處理子系統(tǒng)包含信息及數(shù)據(jù)處理和輿情分析。大數(shù)據(jù)的核心和目標就是預(yù)測，具體到輿情服務(wù)，輿情工作人員從互聯(lián)網(wǎng)浩如煙海的數(shù)據(jù)中挖掘信息、判斷趨勢、提高效益，雖然獲得廣泛且實際的應(yīng)用，但還遠遠不夠。（1）分類技術(shù)：系統(tǒng)內(nèi)置一套較為科學(xué)和完整的輿情分類體系，通過自動分類技術(shù)，對用戶關(guān)注的敏感信息和國計民生的各個重點領(lǐng)域進行實時監(jiān)控，及時發(fā)現(xiàn)負面、有害信息。提供實時信息預(yù)警機制，可將短時間內(nèi)發(fā)生的突發(fā)熱點事件以及敏感新聞通過郵件或者APP預(yù)警通知用戶。所有安全策略的定制、修改和刪除等操作都通過統(tǒng)一的平臺來完成，從而達到統(tǒng)一管理內(nèi)部安全策略的目標。輿情衛(wèi)士手機客戶端實現(xiàn)了PC用戶端和手機端的無縫鏈接,7*24小時全天候監(jiān)測,互聯(lián)網(wǎng)信息全網(wǎng)搜索,每日為您實時的提供輿情信息并輿情預(yù)警信息。系統(tǒng)使用標準格式記錄所有的訪問嘗試并生成易讀的報告，并可以安全地被傳輸?shù)綌?shù)據(jù)庫系統(tǒng)之中，通過這些數(shù)據(jù)可以實現(xiàn)審計、跟蹤和取證。（1）身份認證：基于數(shù)字證書，采用高強度的加密和數(shù)字簽名技術(shù)。敏感信息分析技術(shù)：負面敏感信息分析是本系統(tǒng)最重要的功能之一，通過預(yù)警功能在第一時間將負面或敏感信息告知用戶。信息及數(shù)據(jù)處理主要是針對采集入庫后的數(shù)據(jù)進行整理、處理。目前，數(shù)據(jù)的可獲得度已經(jīng)空前提高，我們可以分析更多的數(shù)據(jù)，有時候甚至可以處理和某個特別現(xiàn)象相關(guān)的所有數(shù)據(jù)，實現(xiàn)真正的大數(shù)據(jù)挖掘和分析。以下簡單列舉了不同時效性和數(shù)據(jù)量條件下的索引方式：實時索引需要實時支持索引的增加以及刪除操作，更新操作可以看作是刪除操作和增加操作的組合。采用Lucene+Hadoop分布式并行計算搜索框架，能對T級以上索引提供7*24小時搜索服務(wù)。6）支持驗證碼采集；支持多頁合并采集。數(shù)據(jù)中心廣泛采用集群應(yīng)用、分布式數(shù)據(jù)存儲、分布式計算等云技術(shù)。輿情衛(wèi)士平臺可提供PB級的海量數(shù)據(jù)存儲能力，能夠利用云數(shù)據(jù)分析技術(shù)進行深度比對、關(guān)聯(lián)、分析和挖掘，實現(xiàn)網(wǎng)上信息的快速發(fā)現(xiàn)、態(tài)勢研判和輿論引導(dǎo)，重點欄目信息15分鐘發(fā)現(xiàn)報警。一是互聯(lián)網(wǎng)信息數(shù)據(jù)中心平臺。 翼騰數(shù)據(jù)中心借助于上述5個方面的云計算技術(shù)，解決了互聯(lián)網(wǎng)海量信息的實時檢索、海量分析、推薦挖掘等問題，依托于全國眾多數(shù)據(jù)中心，為多個行業(yè)、多個地域的SaaS輿情監(jiān)測平臺提供數(shù)據(jù)支撐，為眾多企事業(yè)單位提供優(yōu)質(zhì)的中文信息監(jiān)測服務(wù)。3. 海量數(shù)據(jù)管理技術(shù) 云計算需要對分布的、海量的數(shù)據(jù)進行處理、分析，因此，數(shù)據(jù)管理技術(shù)必需能夠高效的管理大量的數(shù)據(jù)。（4）數(shù)據(jù)挖掘：關(guān)鍵詞是本系統(tǒng)篩選輿情信息的主要規(guī)則，此外還采用數(shù)據(jù)挖掘措施分析出重要輿情信息和有價值的敏感信息，例如：1）分析出輿情高發(fā)網(wǎng)站及頻道；2）分析出輿情高發(fā)人群；3）推薦網(wǎng)民關(guān)注度高的輿情；4）篩選