【文章內(nèi)容簡介】 應用不僅僅是商務通過用戶行為分析實現(xiàn)精準管理、科學決策和人性化服務是大數(shù)據(jù)的典型應用，大數(shù)據(jù)在各行各業(yè)特別是公共服務領域具有廣闊的應用前景F消費行業(yè)F金融服務F食品安全F醫(yī)療衛(wèi)生F軍事F交通環(huán)保F電子商務F氣象管理大數(shù)據(jù) “易 ”理解大數(shù)據(jù) “難 ”雖然大數(shù)據(jù)是一個重大問題，真正的問題是讓大數(shù)據(jù)更有意義目前大數(shù)據(jù)管理多從架構(gòu)和并行等方面考慮，解決高并發(fā)數(shù)據(jù)存取的性能要求及數(shù)據(jù)存儲的橫向擴展，但對非結(jié)構(gòu)化數(shù)據(jù)的內(nèi)容理解仍缺乏實質(zhì)性的突破和進展，這是實現(xiàn)大數(shù)據(jù)資源化、知識化、普適化的核心非結(jié)構(gòu)化海量信息的智能化處理：自然語言理解、多媒體內(nèi)容理解、機器學習等重視大數(shù)據(jù)帶來的危險 然而，大數(shù)據(jù)也隱含著某種危險，即對于數(shù)量方面的片面強調(diào)，而忽視對于質(zhì)的變化的研究，忽視基本理念的轉(zhuǎn)變和更新。 近年來，片面強調(diào) “量化管理 ”， “用數(shù)據(jù)說話 ”的傾向，已經(jīng)造成了不少問題。這種形式的形而上學是需要警惕的。用精確的方法處理根本就不明晰的概念和問題是毫無意義的。因此，要想用精確的方法處理經(jīng)濟問題，第一步是通過更細致的描述工作澄清人們對事物的認識。 所以，在強調(diào)大數(shù)據(jù)的時候，我們必須同時注意理念的轉(zhuǎn)變，防止把一切量化的、一刀切的傾向。關于統(tǒng)計的局限性這里需要特別注意防止統(tǒng)計方法的濫用。要知道，統(tǒng)計方法的前提是個體的同質(zhì)化，是個體同質(zhì)的假定。在中國特定的條件下，我們還要特別注意數(shù)據(jù)的質(zhì)量的影響，避免列寧早就指出過的用統(tǒng)計數(shù)據(jù)欺騙群眾的把戲。在今天的技術條件下，這已經(jīng)變得更加容易。大數(shù)據(jù)帶來的機遇 回顧歷史，我們能夠看到，大數(shù)據(jù)和云計算的出現(xiàn)為電子政務中信息資源開發(fā)利用帶來了新的機遇。 今天的政務部門以及廣大干部和民眾能夠掌握的數(shù)據(jù)、處理數(shù)據(jù)的能力，與幾十年前相比，已經(jīng)大得多得多了。 鑒于經(jīng)濟學家們對其所處理的問題的認識非常有限，而且對有關事實的描述又很不全面，所以經(jīng)濟學是一門太過困難的科學，絕不可能很快就建立起來。只有那些不了解這種情況的人，才有可能試圖建立統(tǒng)一的經(jīng)濟理論體系。即使是遠比經(jīng)濟學先進的科學，比如物理學，目前也沒能得到什么統(tǒng)一體系。 《數(shù)學在科學和社會中的作用》 P54 參看 《時間簡史》 霍金 考慮到與物理學相比，經(jīng)濟學作為一門科學更加困難，更少被人理解，而且無疑處于更早期的發(fā)展階段，所以，人們顯然也就不能對其發(fā)展形勢提出更高的要求。 《數(shù)學在科學和社會中的作用》 P55 在經(jīng)濟學的某些分支里，最有成效的工作也許是耐心的解釋描述；事實上，在目前和今后一段時間內(nèi)，這種工作將占經(jīng)濟學研究的絕大部分。 《數(shù)學在科學和社會中的作用》 P55 電子政務離不開數(shù)據(jù)挖掘（一）電子政務需要數(shù)據(jù)挖掘 而電子政務發(fā)展需要處理越來越的各種類型的海量，對這些數(shù)據(jù)的利用離不開數(shù)據(jù)挖。實時有效信息的需求 政府部門要充分發(fā)揮政府的職能，進行有效地監(jiān)控和管理，同時為了增強民眾和政府之間溝通的時效性，及時掌握有效的信息。降低成本、減少財政支出的需求 電子政務系統(tǒng)的建設帶來的直接的經(jīng)濟效益，就是打破了各級政府之間文件傳遞的繁瑣性，用最快捷的電子方式在政府上下級之間傳遞信息，這不僅降低了政府辦公用品及相關開銷，而且無形中也減少了大量的額外開支。 分析和決策的需求 現(xiàn)有的數(shù)據(jù)庫系統(tǒng)雖然可以高效地實現(xiàn)數(shù)據(jù)的錄入、查詢和部分統(tǒng)計等功能，但是無法發(fā)現(xiàn)數(shù)據(jù)中存在的關系和規(guī)則，無法根據(jù)現(xiàn)有的數(shù)據(jù)預測未來的發(fā)展趨勢。因此，政務系統(tǒng)迫切需要擁有一個智能化的輔助決策支持系統(tǒng)。返返 回回 下一頁下一頁（二）數(shù)據(jù)挖掘離不開專業(yè)化服務（二）數(shù)據(jù)挖掘離不開專業(yè)化服務電子政務數(shù)據(jù)挖掘的若干工作需要人工完成，并且數(shù)據(jù)挖掘過程是分步實現(xiàn)的 ,因此不同步驟的工作需要具有不同專長的人員 ,離不開政務人員的直接參與業(yè)務分析人員精通業(yè)務 ,能夠解釋業(yè)務對象 ,并根據(jù)各業(yè)務對象確定出用于數(shù)據(jù)定義和挖掘算法的業(yè)務需求。數(shù)據(jù)分析人員精通數(shù)據(jù)分析技術 ,并較熟練地掌握統(tǒng)計學方法 ,能夠把業(yè)務需求轉(zhuǎn)化為數(shù)據(jù)挖掘的各步操作 ,并為每步操作選擇合適的技術。數(shù)據(jù)管理人員精通數(shù)據(jù)管理技術 ,能從數(shù)據(jù)庫、數(shù)據(jù)倉庫和各種網(wǎng)絡資源中檢索、收集適于挖掘的數(shù)據(jù)。由此可見 ,數(shù)據(jù)挖掘是一個多種專家合作的過程 ,也是一個在資金上和技術上高投入，同時獲得高回報的過程。F上一頁上一頁 下一頁下一頁（三）數(shù)據(jù)挖掘形式（三）數(shù)據(jù)挖掘形式內(nèi)容挖掘內(nèi)容挖掘就是一個從網(wǎng)絡信息內(nèi)容中發(fā)現(xiàn)有用信息的過程。由于網(wǎng)絡信息內(nèi)容有很多是多媒體數(shù)據(jù)，因此網(wǎng)絡內(nèi)容挖掘也將是一種多媒體數(shù)據(jù)挖掘形式。結(jié)構(gòu)挖掘結(jié)構(gòu)挖掘就是挖掘 Web潛在的鏈接結(jié)構(gòu)模式。這種模式可以用于網(wǎng)頁歸類，并且由此可以獲得有關不同網(wǎng)頁間相似度及關聯(lián)度的信息。網(wǎng)絡結(jié)構(gòu)挖掘有助于用戶找到相關主題的權威站點。用戶行為挖掘內(nèi)容挖掘和絡結(jié)構(gòu)挖掘的挖掘?qū)ο笫窃紨?shù)據(jù)，而用戶用法挖掘面對的則是在用戶和網(wǎng)絡交互的過程中抽取出來的第二手數(shù)據(jù)，包括訪問記錄、代理服務器日志記錄、瀏覽器日志記錄、用戶簡介、注冊信息、用戶對話或交易信息、用戶提問方式等。通過用法挖掘，可以了解用戶的網(wǎng)絡行為數(shù)據(jù)所具有的意義。上一頁上一頁 下一頁下一頁（四）在電子政務中應用大數(shù)據(jù)挖掘（四）在電子政務中應用大數(shù)據(jù)挖掘 電子政務是社會信息化的基礎。電子政務包括政府的信息服務、電子貿(mào)易、電子化政府、政府部門重構(gòu)、群眾參與政府五個方面的內(nèi)容。將網(wǎng)絡數(shù)據(jù)挖掘技術引入電子政務中，可以大大提高政府信息化水平，促進整個社會的信息化。具體體現(xiàn)在以下幾個方面： 政府的電子貿(mào)易 在服務器以及瀏覽器端日志記錄的數(shù)據(jù)中隱藏著模式信息，運用網(wǎng)絡用法挖掘技術可以自動發(fā)現(xiàn)系統(tǒng)的訪問模式和用戶的行為模式，從而進行預測分析。例如，通過評價用戶對某一信息資源瀏覽所花費的時間，可以判斷出用戶對何種資源感興趣；應用聚類分析來識別用戶的訪問動機和趨勢等。這項技術已經(jīng)有效地運用在政府電子貿(mào)易中。 網(wǎng)站設計 通過對網(wǎng)站內(nèi)容的挖掘，主要是對文本內(nèi)容的挖掘，可以有效地組織網(wǎng)站信息，如采用自動歸類技術實現(xiàn)網(wǎng)站信息的層次性組織 。同時可以結(jié)合對用戶訪問日志記錄信息的挖掘，把握用戶的興趣，從而有助于開展網(wǎng)站信息推送服務以及個人信息的定制服務，吸引更多的用戶。F上一頁上一頁 下一頁下一頁 搜索引擎、搜索引擎 1