從大數(shù)據(jù)熱看我國計算機學界的機遇-文庫吧在線文庫
【正文】 、更好的性能來處理數(shù)據(jù)，從而推動業(yè)務創(chuàng)新 Hadoop在數(shù)據(jù)管理中的地位 ? Hadoop在 處理網(wǎng)頁數(shù)據(jù) 等方面取得巨大成功，經過幾年的發(fā)展，從一門邊緣技術成長為一種事實上的標準 ? Hadoop自身的弱點 ? Hadoop是一個離線的、批量的數(shù)據(jù)處理系統(tǒng)，實時在線 (嚴格事務，高效分析 )仍是數(shù)據(jù)庫的擅長 ?從數(shù)據(jù)存儲的角度來看， HDFS專門針對大文件的存儲， 等待時間較長 ，無法做到很高速的隨即讀寫 ? 把 Hadoop和數(shù)據(jù)庫結合起來應對企業(yè)大數(shù)據(jù)的挑戰(zhàn)，是目前值得探索的方案 Hadoop?=大數(shù)據(jù) ? 來源于 Google，在類似搜索引擎的查詢并行化分析處理領域取得極大成功 ? 針對大規(guī)模數(shù)據(jù)密集型應用的編程范式（ programming Paradigm） ? 所基于的 BigTable和 HDFS 是非常質樸的數(shù)據(jù)模型和存儲系統(tǒng) ? 適用領域有限，為大數(shù)據(jù)研究打開了思路，但絕不代表大數(shù)據(jù)技術全部 (僅是一個 case) 回到文件系統(tǒng)來 重新審視數(shù)據(jù)管理之 目的 別忘 了數(shù)據(jù)庫 ?Data+Base ? Oracle/DB2/SQL Server/MySQL ? 1974: System R ? 1968: IMS (IBM Information Management System) ? 層次模型 ? 1965: IDS (Integrated Data Store) ? 網(wǎng)狀模型 ? 1965: List Processing Task Force under CODASYL ? 1967: LPTF ? DBTG (Data Base Task Group) ? 1959: CODASYL (Conference on Data Systems Languages) 數(shù)據(jù)庫的基本目的 ? 計算機從數(shù)值計算轉到數(shù)據(jù)處理， OS中的文件系統(tǒng)發(fā)展成 DBMS ?COBOL， CODASYL ?DBTG報告 (圖靈獎獲得者 Charles Bachman) ? 數(shù)據(jù)庫系統(tǒng)最原始的目標是解決 記賬 (Billing)和 訂票 (Booking)問題 ?商務智能的雛形 ?事務處理 (圖靈獎獲得者 Jim Gray) 數(shù)據(jù)庫發(fā)展伊始，其目標應用簡單 明確 數(shù)據(jù)庫的三大成就 ? 關系模型 ? . Codd (數(shù)據(jù)庫領域第二個圖靈獎獲得者 ) ? 事務處理 ? Jim Gray (數(shù)據(jù)庫領域第三個圖靈獎獲得者 ) ? 查詢優(yōu)化 ?結構化 (模式和實例分離 ) ?關系數(shù)據(jù)庫理論 (關系代數(shù)） ?物理存儲 (索引 /統(tǒng)計 ) 成功 造就了數(shù)百億美元的數(shù)據(jù)庫 產業(yè) 發(fā)展驅動力 (Driving Force) 源頭：應用 不同的企業(yè) ? 傳統(tǒng)的生產 /商業(yè)企業(yè) ?制造業(yè)企業(yè) ?傳統(tǒng)的服務業(yè)企業(yè) ?政府機構 ?IT企業(yè) ? 新型信息服務業(yè)企業(yè) ?搜索引擎、社交媒體 ?電子商務、在線廣告 ?…… 不同的數(shù)據(jù)平臺 ? 傳統(tǒng)的生產 /商業(yè)企業(yè) ?數(shù)據(jù)平臺由 IT企業(yè) 提供基礎系統(tǒng)和構建方案 ?硬件從 PC服務器到小型機、大型主機 ?軟件包括操作系統(tǒng)、網(wǎng)絡、數(shù)據(jù)庫和中間件 ?由專門的 IT部門 負責應用開發(fā)和運行維護 ? 新型信息服務業(yè)企業(yè) ?數(shù)據(jù)平臺自行搭建 ?硬件主要是廉價的 PC集群 ?軟件主要利用開
醫(yī)療健康相關推薦
鄂ICP備17016276號-1