【導讀】數據挖掘應用平臺。對數據倉庫的一些誤解。定單處理；應收帳目；應付帳目；…典型的主題領域：客戶；產品；交易；帳目。主題領域以一組相關的表來具體實現。相關的表通過公共的鍵碼聯系起來。每個鍵碼都有時間元素（從日期到日期；每月累積；單獨日期…主題內數據可以存儲在不同介質上。數據提取、凈化、轉換、裝載。批處理增加，倉庫已經存在的數據不會改變。隨時間而變化（時間維）。數據集市--小型的，面向部門或工作組級。操作數據存儲—ODS是能支持企業(yè)日常的全。據環(huán)境,是DW擴展后得到的一個混合形式。關于數據的數據，用于構造、維持、管理、和使用數據。數據倉庫的數據單位中保存數據的細化或綜合程度的級。數據分散到各自的物理單元中去，它們能獨立地處理。需要非范式化處理。元數據庫及元數據管理。數據訪問和分析工具

　　

【正文】 20xx (Analysis service) ? IBM IntelligentMiner on DB2 ? SAS EnterpriseMiner: data warehousing + mining ? Querybased mining ? Querying database/DW/Web knowledge ? Efficiency and flexibility: preprocessing, online processing, optimization, integration, etc. “ Vertical” Data Mining ? Generic data mining tools? —Too simple to match domainspecific, sophisticated applications ? Expert knowledge and business logic represent many years of work in their own fields! ? Data mining + business logic + domain experts ? A multidimensional view of data miners ? Complexity of data: Web, sequence, spatial, multimedia, … ? Complexity of domains: DNA, astronomy, market, tele, … ? Domainspecific data mining tools ? Provide concrete, killer solution to specific problems ? Feedback to build more powerful tools Invisible Data Mining ? Build mining functions into daily information services ? Web search engine (link analysis, authoritative pages, user profiles)—adaptive web sites, etc. ? Improvement of query processing: history + data ? Making service smart and efficient ? Benefits from/to data mining research ? Data mining research has produced many scalable, efficient, novel mining solutions ? Applications feed new challenge problems to research Towards Intelligent Tools for Data Mining ? Integration paves the way to intelligent mining ? Smart interface brings intelligence ? Easy to use, understand and manipulate ? One picture may worth 1,000 words ? Visual and audio data mining ? HumanCentered Data Mining ? Towards selftuning, selfmanaging, selftriggering data mining Integrated Mining: A Booster for Intelligent Mining ? Integration paves the way to intelligent mining ? Data mining integrates with DBMS, DW, WebDB, etc ? Integration inherits the power of uptodate information technology: querying, MD analysis, similarity search, etc. ? Mining can be viewed as querying database knowledge ? Integration leads to standard interface/language, function/process standardization, utility, and reachability ? Efficiency and scalability bring intelligent mining to reality 數據挖掘與標準化進程 ? CRISP—DM ? 過程標準化 （ CRossIndustry Standard Process for Data Mining） ? XML ? 與數據預處理相結合 ? SOAP（ Simple Object Access Protocol ） ? 數據庫與系統(tǒng)互操作的標準 ? PMML ? 預言模型交換標準 ? OLE DB For Data Mining ? 數據挖掘系統(tǒng)基于 API的接口 提綱 ? 數據倉庫概念 ? 數據倉庫體系結構及組件 ? 數據倉庫設計 ? 數據倉庫技術（與數據庫技術的區(qū)別） ? 數據倉庫性能 ? 數據倉庫應用 ? 數據挖掘應用概述 ? 數據挖掘技術與趨勢 ? 數據挖掘應用平臺（科委申請項目） 數據挖掘應用平臺 ?項目最終目標 ?研究內容（含系統(tǒng)結構、層次等） ?技術路線和實現方法 ?關鍵技術分析 ?成果形式和考核指標 項目最終目標（ 1） ? 一年內，研究數據挖掘技術，實現數據挖掘主要算法，開發(fā)出擁有自主知識產權并具有擴充性好、便于應用的特點的數據挖掘應用平臺，建立一套規(guī)范實用的數據挖掘實際應用方法論 項目最終目標（ 2） ? 所研究的數據挖掘技術達到國際先進水平 ? 實現主要的數據挖掘算法，如關聯規(guī)則、聚集、分類等 ? 所開發(fā)的數據挖掘應用平臺擁有自主知識產權，并具有擴充性好，便于應用的特點 ? 所建立的數據挖掘應用的方法論規(guī)范實用 研究內容 ? 層次結構 ? 數據挖掘 + 商業(yè)邏輯 + 行業(yè)應用 ? 可擴展性的體系結構 ? 軟件結構 ? 數據挖掘平臺的應用 ? 針對行業(yè)的解決方案 ? 軟件開發(fā)商二次開發(fā) 層次結構： 數據挖掘 + 商業(yè)邏輯 + 行業(yè)應用 關聯規(guī)則、序列模式、分類、聚集、神經元網絡、偏差分析 … 數據挖掘算法層 產品推薦、客戶細分、客戶流失、欺詐甄別、特征分析 … 商業(yè)邏輯層 基因（ DNA） 分析、銀行、保險、電信、證券、零售業(yè) … 行業(yè)應用層 數據挖掘應用平臺 可擴展性的體系結構 MIS ERP CRM E_Business 數據挖掘應用平臺 探索數據倉庫 數據挖掘 算法庫 模型庫 組件庫 產品推薦 客戶細分 客戶流失 欺詐甄別 特征分析 序列分析 … … 行業(yè)應用 知識 數據挖掘應用服務器 信息系統(tǒng) 行業(yè)客戶端 軟件結構 ? 供數據挖掘使用的數據倉庫 ? ETL工具 ? 數據挖掘應用服務器 ? 數據挖掘應用服務器管理平臺 ? 針對行業(yè)的分析平臺 數據挖掘應用服務器管理平臺其他行業(yè)分析平臺銀行數據挖掘分析平臺基因（DNA）序列分析平臺數據挖掘應用服務器數據挖掘平臺的應用： 針對行業(yè)的解決方案 數據挖掘應用服務器探索數據倉庫數據挖掘算法商業(yè)決策分析模型信息系統(tǒng) 數據源 數據挖掘應用服務器管理平臺針對行業(yè)的數據挖掘應用 模型使用 數據挖掘平臺的應用 ： 軟件開發(fā)商二次開發(fā) 數據挖掘應用服務器探索數據倉庫數據挖掘算法商業(yè)決策分析模型信息系統(tǒng) 數據源 數據挖掘應用服務器管理平臺軟件產品： MIS、 ERP、CRM…… 模型使用 原來的 軟件產品 增加數據挖掘決策支持模塊 技術路線和實現方法 數據挖掘應用服務器 應用服務器管理平臺 行業(yè)應用 1了解掌握研究動態(tài) 2 商業(yè)模型研究 3 數據倉庫建模 4 數據挖掘算法實現 5 服務器框架構建 階段一 階段二 階段三 1 模型創(chuàng)建可視化 2 服務器調度和監(jiān)聽 3 數據抽取工具研制 4 用戶界面友好 1 模型顯示可視化 2 模型組件的應用 3 特定行業(yè)應用 4 組件二次開發(fā)應用 5 人機接口友好 關鍵技術分析 ? 商業(yè)模型在數據倉庫中的實現 ? 商業(yè)模型可視化研究 ? 模型平滑地嵌入其他應用（ ERP， CRM） ? ETL（ 抽取、轉換、裝載）工具的研制 ? 挖掘算法與商業(yè)模型之間的映射關系 ? 數據挖掘算法的優(yōu)化 Any Questions?