【文章內(nèi)容簡(jiǎn)介】 應(yīng)用不僅僅是商務(wù)通過(guò)用戶行為分析實(shí)現(xiàn)精準(zhǔn)管理、科學(xué)決策和人性化服務(wù)是大數(shù)據(jù)的典型應(yīng)用，大數(shù)據(jù)在各行各業(yè)特別是公共服務(wù)領(lǐng)域具有廣闊的應(yīng)用前景F消費(fèi)行業(yè)F金融服務(wù)F食品安全F醫(yī)療衛(wèi)生F軍事F交通環(huán)保F電子商務(wù)F氣象管理大數(shù)據(jù) “易 ”理解大數(shù)據(jù) “難 ”雖然大數(shù)據(jù)是一個(gè)重大問(wèn)題，真正的問(wèn)題是讓大數(shù)據(jù)更有意義目前大數(shù)據(jù)管理多從架構(gòu)和并行等方面考慮，解決高并發(fā)數(shù)據(jù)存取的性能要求及數(shù)據(jù)存儲(chǔ)的橫向擴(kuò)展，但對(duì)非結(jié)構(gòu)化數(shù)據(jù)的內(nèi)容理解仍缺乏實(shí)質(zhì)性的突破和進(jìn)展，這是實(shí)現(xiàn)大數(shù)據(jù)資源化、知識(shí)化、普適化的核心非結(jié)構(gòu)化海量信息的智能化處理：自然語(yǔ)言理解、多媒體內(nèi)容理解、機(jī)器學(xué)習(xí)等重視大數(shù)據(jù)帶來(lái)的危險(xiǎn) 然而，大數(shù)據(jù)也隱含著某種危險(xiǎn)，即對(duì)于數(shù)量方面的片面強(qiáng)調(diào)，而忽視對(duì)于質(zhì)的變化的研究，忽視基本理念的轉(zhuǎn)變和更新。 近年來(lái)，片面強(qiáng)調(diào) “量化管理 ”， “用數(shù)據(jù)說(shuō)話 ”的傾向，已經(jīng)造成了不少問(wèn)題。這種形式的形而上學(xué)是需要警惕的。用精確的方法處理根本就不明晰的概念和問(wèn)題是毫無(wú)意義的。因此，要想用精確的方法處理經(jīng)濟(jì)問(wèn)題，第一步是通過(guò)更細(xì)致的描述工作澄清人們對(duì)事物的認(rèn)識(shí)。 所以，在強(qiáng)調(diào)大數(shù)據(jù)的時(shí)候，我們必須同時(shí)注意理念的轉(zhuǎn)變，防止把一切量化的、一刀切的傾向。關(guān)于統(tǒng)計(jì)的局限性這里需要特別注意防止統(tǒng)計(jì)方法的濫用。要知道，統(tǒng)計(jì)方法的前提是個(gè)體的同質(zhì)化，是個(gè)體同質(zhì)的假定。在中國(guó)特定的條件下，我們還要特別注意數(shù)據(jù)的質(zhì)量的影響，避免列寧早就指出過(guò)的用統(tǒng)計(jì)數(shù)據(jù)欺騙群眾的把戲。在今天的技術(shù)條件下，這已經(jīng)變得更加容易。大數(shù)據(jù)帶來(lái)的機(jī)遇 回顧歷史，我們能夠看到，大數(shù)據(jù)和云計(jì)算的出現(xiàn)為電子政務(wù)中信息資源開(kāi)發(fā)利用帶來(lái)了新的機(jī)遇。 今天的政務(wù)部門以及廣大干部和民眾能夠掌握的數(shù)據(jù)、處理數(shù)據(jù)的能力，與幾十年前相比，已經(jīng)大得多得多了。 鑒于經(jīng)濟(jì)學(xué)家們對(duì)其所處理的問(wèn)題的認(rèn)識(shí)非常有限，而且對(duì)有關(guān)事實(shí)的描述又很不全面，所以經(jīng)濟(jì)學(xué)是一門太過(guò)困難的科學(xué)，絕不可能很快就建立起來(lái)。只有那些不了解這種情況的人，才有可能試圖建立統(tǒng)一的經(jīng)濟(jì)理論體系。即使是遠(yuǎn)比經(jīng)濟(jì)學(xué)先進(jìn)的科學(xué)，比如物理學(xué)，目前也沒(méi)能得到什么統(tǒng)一體系。 《數(shù)學(xué)在科學(xué)和社會(huì)中的作用》 P54 參看 《時(shí)間簡(jiǎn)史》 霍金 考慮到與物理學(xué)相比，經(jīng)濟(jì)學(xué)作為一門科學(xué)更加困難，更少被人理解，而且無(wú)疑處于更早期的發(fā)展階段，所以，人們顯然也就不能對(duì)其發(fā)展形勢(shì)提出更高的要求。 《數(shù)學(xué)在科學(xué)和社會(huì)中的作用》 P55 在經(jīng)濟(jì)學(xué)的某些分支里，最有成效的工作也許是耐心的解釋描述；事實(shí)上，在目前和今后一段時(shí)間內(nèi)，這種工作將占經(jīng)濟(jì)學(xué)研究的絕大部分。 《數(shù)學(xué)在科學(xué)和社會(huì)中的作用》 P55 電子政務(wù)離不開(kāi)數(shù)據(jù)挖掘（一）電子政務(wù)需要數(shù)據(jù)挖掘 而電子政務(wù)發(fā)展需要處理越來(lái)越的各種類型的海量，對(duì)這些數(shù)據(jù)的利用離不開(kāi)數(shù)據(jù)挖。實(shí)時(shí)有效信息的需求 政府部門要充分發(fā)揮政府的職能，進(jìn)行有效地監(jiān)控和管理，同時(shí)為了增強(qiáng)民眾和政府之間溝通的時(shí)效性，及時(shí)掌握有效的信息。降低成本、減少財(cái)政支出的需求 電子政務(wù)系統(tǒng)的建設(shè)帶來(lái)的直接的經(jīng)濟(jì)效益，就是打破了各級(jí)政府之間文件傳遞的繁瑣性，用最快捷的電子方式在政府上下級(jí)之間傳遞信息，這不僅降低了政府辦公用品及相關(guān)開(kāi)銷，而且無(wú)形中也減少了大量的額外開(kāi)支。 分析和決策的需求 現(xiàn)有的數(shù)據(jù)庫(kù)系統(tǒng)雖然可以高效地實(shí)現(xiàn)數(shù)據(jù)的錄入、查詢和部分統(tǒng)計(jì)等功能，但是無(wú)法發(fā)現(xiàn)數(shù)據(jù)中存在的關(guān)系和規(guī)則，無(wú)法根據(jù)現(xiàn)有的數(shù)據(jù)預(yù)測(cè)未來(lái)的發(fā)展趨勢(shì)。因此，政務(wù)系統(tǒng)迫切需要擁有一個(gè)智能化的輔助決策支持系統(tǒng)。返返 回回 下一頁(yè)下一頁(yè)（二）數(shù)據(jù)挖掘離不開(kāi)專業(yè)化服務(wù)（二）數(shù)據(jù)挖掘離不開(kāi)專業(yè)化服務(wù)電子政務(wù)數(shù)據(jù)挖掘的若干工作需要人工完成，并且數(shù)據(jù)挖掘過(guò)程是分步實(shí)現(xiàn)的 ,因此不同步驟的工作需要具有不同專長(zhǎng)的人員 ,離不開(kāi)政務(wù)人員的直接參與業(yè)務(wù)分析人員精通業(yè)務(wù) ,能夠解釋業(yè)務(wù)對(duì)象 ,并根據(jù)各業(yè)務(wù)對(duì)象確定出用于數(shù)據(jù)定義和挖掘算法的業(yè)務(wù)需求。數(shù)據(jù)分析人員精通數(shù)據(jù)分析技術(shù) ,并較熟練地掌握統(tǒng)計(jì)學(xué)方法 ,能夠把業(yè)務(wù)需求轉(zhuǎn)化為數(shù)據(jù)挖掘的各步操作 ,并為每步操作選擇合適的技術(shù)。數(shù)據(jù)管理人員精通數(shù)據(jù)管理技術(shù) ,能從數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)和各種網(wǎng)絡(luò)資源中檢索、收集適于挖掘的數(shù)據(jù)。由此可見(jiàn) ,數(shù)據(jù)挖掘是一個(gè)多種專家合作的過(guò)程 ,也是一個(gè)在資金上和技術(shù)上高投入，同時(shí)獲得高回報(bào)的過(guò)程。F上一頁(yè)上一頁(yè) 下一頁(yè)下一頁(yè)（三）數(shù)據(jù)挖掘形式（三）數(shù)據(jù)挖掘形式內(nèi)容挖掘內(nèi)容挖掘就是一個(gè)從網(wǎng)絡(luò)信息內(nèi)容中發(fā)現(xiàn)有用信息的過(guò)程。由于網(wǎng)絡(luò)信息內(nèi)容有很多是多媒體數(shù)據(jù)，因此網(wǎng)絡(luò)內(nèi)容挖掘也將是一種多媒體數(shù)據(jù)挖掘形式。結(jié)構(gòu)挖掘結(jié)構(gòu)挖掘就是挖掘 Web潛在的鏈接結(jié)構(gòu)模式。這種模式可以用于網(wǎng)頁(yè)歸類，并且由此可以獲得有關(guān)不同網(wǎng)頁(yè)間相似度及關(guān)聯(lián)度的信息。網(wǎng)絡(luò)結(jié)構(gòu)挖掘有助于用戶找到相關(guān)主題的權(quán)威站點(diǎn)。用戶行為挖掘內(nèi)容挖掘和絡(luò)結(jié)構(gòu)挖掘的挖掘?qū)ο笫窃紨?shù)據(jù)，而用戶用法挖掘面對(duì)的則是在用戶和網(wǎng)絡(luò)交互的過(guò)程中抽取出來(lái)的第二手?jǐn)?shù)據(jù)，包括訪問(wèn)記錄、代理服務(wù)器日志記錄、瀏覽器日志記錄、用戶簡(jiǎn)介、注冊(cè)信息、用戶對(duì)話或交易信息、用戶提問(wèn)方式等。通過(guò)用法挖掘，可以了解用戶的網(wǎng)絡(luò)行為數(shù)據(jù)所具有的意義。上一頁(yè)上一頁(yè) 下一頁(yè)下一頁(yè)（四）在電子政務(wù)中應(yīng)用大數(shù)據(jù)挖掘（四）在電子政務(wù)中應(yīng)用大數(shù)據(jù)挖掘 電子政務(wù)是社會(huì)信息化的基礎(chǔ)。電子政務(wù)包括政府的信息服務(wù)、電子貿(mào)易、電子化政府、政府部門重構(gòu)、群眾參與政府五個(gè)方面的內(nèi)容。將網(wǎng)絡(luò)數(shù)據(jù)挖掘技術(shù)引入電子政務(wù)中，可以大大提高政府信息化水平，促進(jìn)整個(gè)社會(huì)的信息化。具體體現(xiàn)在以下幾個(gè)方面： 政府的電子貿(mào)易 在服務(wù)器以及瀏覽器端日志記錄的數(shù)據(jù)中隱藏著模式信息，運(yùn)用網(wǎng)絡(luò)用法挖掘技術(shù)可以自動(dòng)發(fā)現(xiàn)系統(tǒng)的訪問(wèn)模式和用戶的行為模式，從而進(jìn)行預(yù)測(cè)分析。例如，通過(guò)評(píng)價(jià)用戶對(duì)某一信息資源瀏覽所花費(fèi)的時(shí)間，可以判斷出用戶對(duì)何種資源感興趣；應(yīng)用聚類分析來(lái)識(shí)別用戶的訪問(wèn)動(dòng)機(jī)和趨勢(shì)等。這項(xiàng)技術(shù)已經(jīng)有效地運(yùn)用在政府電子貿(mào)易中。 網(wǎng)站設(shè)計(jì) 通過(guò)對(duì)網(wǎng)站內(nèi)容的挖掘，主要是對(duì)文本內(nèi)容的挖掘，可以有效地組織網(wǎng)站信息，如采用自動(dòng)歸類技術(shù)實(shí)現(xiàn)網(wǎng)站信息的層次性組織 。同時(shí)可以結(jié)合對(duì)用戶訪問(wèn)日志記錄信息的挖掘，把握用戶的興趣，從而有助于開(kāi)展網(wǎng)站信息推送服務(wù)以及個(gè)人信息的定制服務(wù)，吸引更多的用戶。F上一頁(yè)上一頁(yè) 下一頁(yè)下一頁(yè) 搜索引擎、搜索引擎 1