智能運輸系統(tǒng)概論第9章-資料下載頁
2025-01-04 01:49本頁面
【正文】 運輸系統(tǒng)概論 大數(shù)據(jù)的定義 大數(shù)據(jù)定義 大數(shù)據(jù) （ Big Data） 本身是一個較為抽象的概念 ， 單從字面來看 ， 大數(shù)據(jù)表示 數(shù)據(jù)規(guī)模龐大 ， 但與以往的 “ 海量數(shù)據(jù) ” （ massive data） 、 “ 超大規(guī)模數(shù)據(jù) ” （ very large data） 等概念之間有何區(qū)別 。 目前 ， 國內(nèi)外對于 “ 大數(shù)據(jù) ”的基本定義 尚未給予公認的說法 。 大數(shù)據(jù)由 巨型數(shù)據(jù)集 組成 ， 這些數(shù)據(jù)集的大小常 超出 人類在 可接受時間 下的收集 、 使用 、 管理和處理能力 。 大小具有 波動性 ， 至 2023年 ， 單一數(shù)據(jù)集 的大小從數(shù)兆字節(jié) （ TB）至數(shù)十兆億字節(jié) （ PB） 不等 。 幾乎無法使用大多數(shù)的 數(shù)據(jù)庫管理系統(tǒng) 處理 ， 必須使用 “ 在數(shù)十 、 數(shù)百甚至數(shù)千臺服務器上同時平行運行的軟件 。 智能運輸系統(tǒng)概論 大數(shù)據(jù)的定義 大數(shù)據(jù)特征 大數(shù)據(jù) （ Big Data） 具有 4V特性 ： 數(shù)據(jù)集的 規(guī)模性 （ Volume） 大數(shù)據(jù)的 首要特征 就是應該具有數(shù)據(jù)的 規(guī)模性 。 多樣性 （ Variety） 大數(shù)據(jù)的 “ 大 ” 是指 復雜性 方面的大 ， 而不是體積大 。 高速性 （ Velocity） 所謂的 高速性 特點是指對于大量數(shù)據(jù)的輸入輸出過程有著很高的要求 ， 即快速的完成 多種數(shù)據(jù)源 的數(shù)據(jù)采集及數(shù)據(jù)處理的過程 。 真實性 （ Veracity） 要求數(shù)據(jù)具有 真實性 特征 ， 不能包含偽造數(shù)據(jù) 。 智能運輸系統(tǒng)概論 大數(shù)據(jù)的定義 綜上所述 ， 通過對 大數(shù)據(jù) 所滿足的基本要素分析 ， 結(jié)合國內(nèi)外相關(guān)的研究給出 “ 大數(shù)據(jù) ” 的 基本定義 ： “ 大數(shù)據(jù) ” 是指所涉及的 數(shù)據(jù)規(guī)模 復雜巨大 ， 難以利用人工或者現(xiàn)有的數(shù)據(jù) 采集 、 數(shù)據(jù) 儲存 及數(shù)據(jù) 處理 方法處理的 數(shù)據(jù)集合 。 在 總數(shù)據(jù)量相同 的情況下 ， 與個別分析獨立的 小型數(shù)據(jù)集 （ data set） 相比 ， 將各個小型數(shù)據(jù)集合并后進行分析可得出許多額外的信息和數(shù)據(jù)關(guān)系性 ， 可用來察覺商業(yè)趨勢 、 判定研究質(zhì)量 、 避免疾病擴散 、 打擊犯罪或測定實時交通路況等；這樣的用途正是大型數(shù)據(jù)集盛行的原因 。 智能運輸系統(tǒng)概論 智能運輸系統(tǒng)中的大數(shù)據(jù)信息處理模式 目前 ， 智能運輸系統(tǒng)領(lǐng)域大數(shù)據(jù)的處理模式主要分為 流體處理模式 （ stream processing） 和 批量處理模式 （ batch processing） 兩種 。 流體處理模式 是指對于所采集的數(shù)據(jù)實時動態(tài)處理；批量處理模式 是儲存 — 處理的過程 。 流體模型框架 流體處理的 基本理念 是交通數(shù)據(jù)的價值會隨著時間的流逝而不斷減少 ， 因此 ， 盡可能快地對 最新數(shù)據(jù) 進行分析并給出結(jié)果是所有流數(shù)據(jù)處理模式的 共同目標 。將 交通數(shù)據(jù) 信息視為 流體 ， 源源不斷的數(shù)據(jù)組成了 數(shù)據(jù)流 。 當新的交通數(shù)據(jù)到來時就立刻處理并返回所需的結(jié)果 。 ix1x C PUmem o r y… … dat a st ream??基本交通數(shù)據(jù)流體模型 智能運輸系統(tǒng)概論 智能運輸系統(tǒng)中的大數(shù)據(jù)信息處理模式 批量模型框架 Google公司于 2023年提出 MapReduce編程模型是最具代表性的 批處理 模式 。 MapReduce是用于 大規(guī)模數(shù)據(jù)集 （ 大于 1TB） 的 并行運算 。 概念 “ Map（ 映射 ） ” 和“ Reduce（ 化簡 ） ” 及他們的主要思想 ， 都是從 函數(shù)式編程語言 借來的 ， 還有從 矢量編程語言 借來的特性 。當前的軟件實現(xiàn)是指定一個 Map（ 映射 ） 函數(shù) ， 用來把一組 鍵值 對映射成一組新的鍵值對 ， 指定并發(fā)的Reduce（ 化簡 ） 函數(shù) ， 用來保證所有映射的鍵值對中的每一個 共享相同 的鍵組 。 MapReduce執(zhí)行流程圖 智能運輸系統(tǒng)概論 大數(shù)據(jù)技術(shù)在智能運輸系統(tǒng)中的應用 大數(shù)據(jù)為智能運輸發(fā)展帶來新的 機遇 ： 大數(shù)據(jù)技術(shù)的 海量數(shù)據(jù)存儲 和 高效計算能力 ， 將實現(xiàn)交通管理系統(tǒng) 跨區(qū)域 、 跨部門 的 集成 和 組合 ； 將會更加有效地 配置 交通資源 ， 從而大大提高交通運行效率 、 安全水平 和 服務能力 ； 交通大數(shù)據(jù)分析將為交通 管理 、 決策 、 規(guī)劃 和 運營 、服務 以及 主動安全防范 帶來更加有效的支持； 基于交通大數(shù)據(jù)的 分析 能夠有效地為 公共安全 和 社會管理 提供新的理念 、 模式和手段 。 智能運輸系統(tǒng)概論 大數(shù)據(jù)技術(shù)在智能運輸系統(tǒng)中的應用 大數(shù)據(jù) 可以在一下方面 促進 智能運輸發(fā)展： 緩解城市交通 擁堵 提高運輸 效率 增強交通 安全 水平 保障城市信息 暢通 提供 環(huán)境監(jiān)測 方式 智能運輸系統(tǒng)概論 謝謝觀看 /歡迎下載 BY FAITH I MEAN A VISION OF GOOD ONE CHERISHES AND THE ENTHUSIASM THAT PUSHES ONE TO SEEK ITS FULFILLMENT REGARDLESS OF OBSTACLES. BY FAITH I BY FAIT
教學課件相關(guān)推薦
鄂ICP備17016276號-1