【文章內(nèi)容簡介】 應(yīng)用不僅僅是商務(wù)通過用戶行為分析實(shí)現(xiàn)精準(zhǔn)管理、科學(xué)決策和人性化服務(wù)是大數(shù)據(jù)的典型應(yīng)用，大數(shù)據(jù)在各行各業(yè)特別是公共服務(wù)領(lǐng)域具有廣闊的應(yīng)用前景F消費(fèi)行業(yè)F金融服務(wù)F食品安全F醫(yī)療衛(wèi)生F軍事F交通環(huán)保F電子商務(wù)F氣象管理大數(shù)據(jù) “易 ”理解大數(shù)據(jù) “難 ”雖然大數(shù)據(jù)是一個(gè)重大問題，真正的問題是讓大數(shù)據(jù)更有意義目前大數(shù)據(jù)管理多從架構(gòu)和并行等方面考慮，解決高并發(fā)數(shù)據(jù)存取的性能要求及數(shù)據(jù)存儲(chǔ)的橫向擴(kuò)展，但對(duì)非結(jié)構(gòu)化數(shù)據(jù)的內(nèi)容理解仍缺乏實(shí)質(zhì)性的突破和進(jìn)展，這是實(shí)現(xiàn)大數(shù)據(jù)資源化、知識(shí)化、普適化的核心非結(jié)構(gòu)化海量信息的智能化處理：自然語言理解、多媒體內(nèi)容理解、機(jī)器學(xué)習(xí)等重視大數(shù)據(jù)帶來的危險(xiǎn) 然而，大數(shù)據(jù)也隱含著某種危險(xiǎn)，即對(duì)于數(shù)量方面的片面強(qiáng)調(diào)，而忽視對(duì)于質(zhì)的變化的研究，忽視基本理念的轉(zhuǎn)變和更新。 近年來，片面強(qiáng)調(diào) “量化管理 ”， “用數(shù)據(jù)說話 ”的傾向，已經(jīng)造成了不少問題。這種形式的形而上學(xué)是需要警惕的。用精確的方法處理根本就不明晰的概念和問題是毫無意義的。因此，要想用精確的方法處理經(jīng)濟(jì)問題，第一步是通過更細(xì)致的描述工作澄清人們對(duì)事物的認(rèn)識(shí)。 所以，在強(qiáng)調(diào)大數(shù)據(jù)的時(shí)候，我們必須同時(shí)注意理念的轉(zhuǎn)變，防止把一切量化的、一刀切的傾向。關(guān)于統(tǒng)計(jì)的局限性這里需要特別注意防止統(tǒng)計(jì)方法的濫用。要知道，統(tǒng)計(jì)方法的前提是個(gè)體的同質(zhì)化，是個(gè)體同質(zhì)的假定。在中國特定的條件下，我們還要特別注意數(shù)據(jù)的質(zhì)量的影響，避免列寧早就指出過的用統(tǒng)計(jì)數(shù)據(jù)欺騙群眾的把戲。在今天的技術(shù)條件下，這已經(jīng)變得更加容易。大數(shù)據(jù)帶來的機(jī)遇 回顧歷史，我們能夠看到，大數(shù)據(jù)和云計(jì)算的出現(xiàn)為電子政務(wù)中信息資源開發(fā)利用帶來了新的機(jī)遇。 今天的政務(wù)部門以及廣大干部和民眾能夠掌握的數(shù)據(jù)、處理數(shù)據(jù)的能力，與幾十年前相比，已經(jīng)大得多得多了。 鑒于經(jīng)濟(jì)學(xué)家們對(duì)其所處理的問題的認(rèn)識(shí)非常有限，而且對(duì)有關(guān)事實(shí)的描述又很不全面，所以經(jīng)濟(jì)學(xué)是一門太過困難的科學(xué)，絕不可能很快就建立起來。只有那些不了解這種情況的人，才有可能試圖建立統(tǒng)一的經(jīng)濟(jì)理論體系。即使是遠(yuǎn)比經(jīng)濟(jì)學(xué)先進(jìn)的科學(xué)，比如物理學(xué)，目前也沒能得到什么統(tǒng)一體系。 《數(shù)學(xué)在科學(xué)和社會(huì)中的作用》 P54 參看 《時(shí)間簡史》 霍金 考慮到與物理學(xué)相比，經(jīng)濟(jì)學(xué)作為一門科學(xué)更加困難，更少被人理解，而且無疑處于更早期的發(fā)展階段，所以，人們顯然也就不能對(duì)其發(fā)展形勢提出更高的要求。 《數(shù)學(xué)在科學(xué)和社會(huì)中的作用》 P55 在經(jīng)濟(jì)學(xué)的某些分支里，最有成效的工作也許是耐心的解釋描述；事實(shí)上，在目前和今后一段時(shí)間內(nèi)，這種工作將占經(jīng)濟(jì)學(xué)研究的絕大部分。 《數(shù)學(xué)在科學(xué)和社會(huì)中的作用》 P55 電子政務(wù)離不開數(shù)據(jù)挖掘（一）電子政務(wù)需要數(shù)據(jù)挖掘 而電子政務(wù)發(fā)展需要處理越來越的各種類型的海量，對(duì)這些數(shù)據(jù)的利用離不開數(shù)據(jù)挖。實(shí)時(shí)有效信息的需求 政府部門要充分發(fā)揮政府的職能，進(jìn)行有效地監(jiān)控和管理，同時(shí)為了增強(qiáng)民眾和政府之間溝通的時(shí)效性，及時(shí)掌握有效的信息。降低成本、減少財(cái)政支出的需求 電子政務(wù)系統(tǒng)的建設(shè)帶來的直接的經(jīng)濟(jì)效益，就是打破了各級(jí)政府之間文件傳遞的繁瑣性，用最快捷的電子方式在政府上下級(jí)之間傳遞信息，這不僅降低了政府辦公用品及相關(guān)開銷，而且無形中也減少了大量的額外開支。 分析和決策的需求 現(xiàn)有的數(shù)據(jù)庫系統(tǒng)雖然可以高效地實(shí)現(xiàn)數(shù)據(jù)的錄入、查詢和部分統(tǒng)計(jì)等功能，但是無法發(fā)現(xiàn)數(shù)據(jù)中存在的關(guān)系和規(guī)則，無法根據(jù)現(xiàn)有的數(shù)據(jù)預(yù)測未來的發(fā)展趨勢。因此，政務(wù)系統(tǒng)迫切需要擁有一個(gè)智能化的輔助決策支持系統(tǒng)。返返 回回 下一頁下一頁（二）數(shù)據(jù)挖掘離不開專業(yè)化服務(wù)（二）數(shù)據(jù)挖掘離不開專業(yè)化服務(wù)電子政務(wù)數(shù)據(jù)挖掘的若干工作需要人工完成，并且數(shù)據(jù)挖掘過程是分步實(shí)現(xiàn)的 ,因此不同步驟的工作需要具有不同專長的人員 ,離不開政務(wù)人員的直接參與業(yè)務(wù)分析人員精通業(yè)務(wù) ,能夠解釋業(yè)務(wù)對(duì)象 ,并根據(jù)各業(yè)務(wù)對(duì)象確定出用于數(shù)據(jù)定義和挖掘算法的業(yè)務(wù)需求。數(shù)據(jù)分析人員精通數(shù)據(jù)分析技術(shù) ,并較熟練地掌握統(tǒng)計(jì)學(xué)方法 ,能夠把業(yè)務(wù)需求轉(zhuǎn)化為數(shù)據(jù)挖掘的各步操作 ,并為每步操作選擇合適的技術(shù)。數(shù)據(jù)管理人員精通數(shù)據(jù)管理技術(shù) ,能從數(shù)據(jù)庫、數(shù)據(jù)倉庫和各種網(wǎng)絡(luò)資源中檢索、收集適于挖掘的數(shù)據(jù)。由此可見 ,數(shù)據(jù)挖掘是一個(gè)多種專家合作的過程 ,也是一個(gè)在資金上和技術(shù)上高投入，同時(shí)獲得高回報(bào)的過程。F上一頁上一頁 下一頁下一頁（三）數(shù)據(jù)挖掘形式（三）數(shù)據(jù)挖掘形式內(nèi)容挖掘內(nèi)容挖掘就是一個(gè)從網(wǎng)絡(luò)信息內(nèi)容中發(fā)現(xiàn)有用信息的過程。由于網(wǎng)絡(luò)信息內(nèi)容有很多是多媒體數(shù)據(jù)，因此網(wǎng)絡(luò)內(nèi)容挖掘也將是一種多媒體數(shù)據(jù)挖掘形式。結(jié)構(gòu)挖掘結(jié)構(gòu)挖掘就是挖掘 Web潛在的鏈接結(jié)構(gòu)模式。這種模式可以用于網(wǎng)頁歸類，并且由此可以獲得有關(guān)不同網(wǎng)頁間相似度及關(guān)聯(lián)度的信息。網(wǎng)絡(luò)結(jié)構(gòu)挖掘有助于用戶找到相關(guān)主題的權(quán)威站點(diǎn)。用戶行為挖掘內(nèi)容挖掘和絡(luò)結(jié)構(gòu)挖掘的挖掘?qū)ο笫窃紨?shù)據(jù)，而用戶用法挖掘面對(duì)的則是在用戶和網(wǎng)絡(luò)交互的過程中抽取出來的第二手?jǐn)?shù)據(jù)，包括訪問記錄、代理服務(wù)器日志記錄、瀏覽器日志記錄、用戶簡介、注冊(cè)信息、用戶對(duì)話或交易信息、用戶提問方式等。通過用法挖掘，可以了解用戶的網(wǎng)絡(luò)行為數(shù)據(jù)所具有的意義。上一頁上一頁 下一頁下一頁（四）在電子政務(wù)中應(yīng)用大數(shù)據(jù)挖掘（四）在電子政務(wù)中應(yīng)用大數(shù)據(jù)挖掘 電子政務(wù)是社會(huì)信息化的基礎(chǔ)。電子政務(wù)包括政府的信息服務(wù)、電子貿(mào)易、電子化政府、政府部門重構(gòu)、群眾參與政府五個(gè)方面的內(nèi)容。將網(wǎng)絡(luò)數(shù)據(jù)挖掘技術(shù)引入電子政務(wù)中，可以大大提高政府信息化水平，促進(jìn)整個(gè)社會(huì)的信息化。具體體現(xiàn)在以下幾個(gè)方面： 政府的電子貿(mào)易 在服務(wù)器以及瀏覽器端日志記錄的數(shù)據(jù)中隱藏著模式信息，運(yùn)用網(wǎng)絡(luò)用法挖掘技術(shù)可以自動(dòng)發(fā)現(xiàn)系統(tǒng)的訪問模式和用戶的行為模式，從而進(jìn)行預(yù)測分析。例如，通過評(píng)價(jià)用戶對(duì)某一信息資源瀏覽所花費(fèi)的時(shí)間，可以判斷出用戶對(duì)何種資源感興趣；應(yīng)用聚類分析來識(shí)別用戶的訪問動(dòng)機(jī)和趨勢等。這項(xiàng)技術(shù)已經(jīng)有效地運(yùn)用在政府電子貿(mào)易中。 網(wǎng)站設(shè)計(jì) 通過對(duì)網(wǎng)站內(nèi)容的挖掘，主要是對(duì)文本內(nèi)容的挖掘，可以有效地組織網(wǎng)站信息，如采用自動(dòng)歸類技術(shù)實(shí)現(xiàn)網(wǎng)站信息的層次性組織 。同時(shí)可以結(jié)合對(duì)用戶訪問日志記錄信息的挖掘，把握用戶的興趣，從而有助于開展網(wǎng)站信息推送服務(wù)以及個(gè)人信息的定制服務(wù)，吸引更多的用戶。F上一頁上一頁 下一頁下一頁 搜索引擎、搜索引擎 1