l省交通廳大數(shù)據(jù)項目v1(已修改)
2025-01-06 11:26 本頁面
【正文】 CONFIDENTIAL L省交通廳大數(shù)據(jù)平臺規(guī)劃 議題 1 我們對交通大數(shù)據(jù)平臺的理解 建設(shè)思路 1 2 應(yīng)用 規(guī)劃與部署 4 總體 規(guī)劃 3 CONFIDENTIAL CONFIDENTIAL 智慧交通 大數(shù)據(jù) 方案優(yōu)勢 ?實時監(jiān)測、智能監(jiān)控交通信息，輕松處理海量數(shù)據(jù) ?應(yīng)用負(fù)載適應(yīng)性強(qiáng)，廣泛兼容，易于擴(kuò)展 ?交通信息智能處理，及時發(fā)布 ?動態(tài)數(shù)據(jù)整合與共享 ?高可用性、高穩(wěn)定性 客戶價值 ?海量數(shù)據(jù)處理和實時分析 ?全網(wǎng)、全天候覆蓋 ?動態(tài)監(jiān)控、智能導(dǎo)航 ?交通擁堵偵測與預(yù)警 ?跨地區(qū)信息共享、資源整合 ?顯著降低軟硬件購置成本 Hadoop家族 大數(shù)據(jù)服務(wù) 交通數(shù)據(jù)源 CONFIDENTIAL 浮動車計算分析 CONFIDENTIAL 出租汽車客流分析 議題 7 我們對交通大數(shù)據(jù)平臺的理解 建設(shè)思路 1 2 應(yīng)用 規(guī)劃與部署 4 總體 規(guī)劃 3 8 CONFIDENTIAL 文件 存儲 分析 搜索 挖掘 數(shù)據(jù)高鐵 交換 實時 數(shù)據(jù)庫 監(jiān)控 openfalcon 以 Hadoop為核心，融合其他技術(shù)平臺系統(tǒng)，實現(xiàn)超融合一棧式企業(yè)級數(shù)據(jù)分析解決方案。數(shù)據(jù)存儲，數(shù)據(jù)分析，可視化，運(yùn)維監(jiān)控，機(jī)器學(xué)習(xí)，人工智能。全面的 一棧式 解決方案。實現(xiàn)平臺級融合，所有平臺一統(tǒng)底層數(shù)據(jù)交互格式，統(tǒng)一元數(shù)據(jù)管理，數(shù)據(jù) 治理。全面擁抱開源技術(shù)棧。 展現(xiàn) 9 CONFIDENTIAL 大 數(shù)據(jù) 平臺 具備的關(guān)鍵能力 基礎(chǔ)的大數(shù)據(jù)平臺能力 ： 具備管理大數(shù)據(jù)平臺主機(jī)集群的能力，能夠按照需要，勱態(tài)分配資源，具備多租戶管理能力，數(shù)據(jù)安全管理能力；同時具備處理海量數(shù)據(jù)的能力，可以根據(jù)需要，對丌同業(yè)務(wù)部門丌同的應(yīng)用，開放丌同的數(shù)據(jù)。 能力一 大數(shù)據(jù)采集： 大數(shù)據(jù) 平臺容納百億級數(shù)據(jù)量，能夠從內(nèi)部和外部的各種數(shù)據(jù)源中獲取數(shù)據(jù) 能力二 大數(shù)據(jù)計算分析： 海量數(shù)據(jù)實時和離線分析計算，秒級響應(yīng)。 能力三 10 CONFIDENTIAL 關(guān)鍵能力一：基礎(chǔ)大數(shù)據(jù)平臺管理能力 大 數(shù)據(jù)總體架構(gòu) (數(shù)據(jù)銀行 +數(shù)據(jù)高鐵 ) 通過 八大類接口實現(xiàn)大數(shù)據(jù)平臺存儲能力和計算能力的開放。 查詢 開發(fā)框架 訪問服務(wù) (DataBank UI) JDBC/ODBC接口 數(shù)據(jù)服務(wù) (DataBank API) 實時數(shù)據(jù) 數(shù)據(jù)庫 搜索引擎 認(rèn)證管理 安全 /管理 權(quán)限管理 審計管理 圖形化安裝部署工具 商業(yè)支持 報警 結(jié)構(gòu)化數(shù)據(jù) 數(shù)據(jù)庫 API 流 傳感器 半結(jié)構(gòu)化數(shù)據(jù) 非結(jié)構(gòu)化數(shù)據(jù) 日志 網(wǎng)頁 圖片 二迚制 視頻 音頻 管理 API(安裝 /監(jiān)控 /配置 ) 文檔 HADOOPHDFS/YARN/ZOOKEEPER (POWER/EC) 數(shù)據(jù)訪問 RESTAPI接口 HBASE 數(shù)據(jù)倉庫 交互分析 數(shù)據(jù)挖掘 工作流 數(shù)據(jù)挖掘 SparkSQL kylin phoenix opentsdb Solr elasticsearch MLlib SparkR Redis HIVE SPARK STORM KAFKA crate 文檔解析 拼音提示 數(shù)據(jù)同步 搜索統(tǒng)計 實時接入 實時展現(xiàn) 統(tǒng)計分析 實時預(yù)警 ETL 工作流 權(quán)限控制 增強(qiáng)函數(shù) 工作流 深度學(xué)習(xí) 可視化 訪問工具 開發(fā)框架 管理工具 交互工具 展現(xiàn)工具 sqoop kettle JAVA webservice kafka flume NIFI 結(jié)構(gòu)化數(shù)據(jù) 半結(jié)構(gòu)化數(shù)據(jù) 非結(jié)構(gòu)化數(shù)據(jù) 12 CONFIDENTIAL 關(guān)鍵能力二：大數(shù)據(jù)采集 數(shù)據(jù)來源 數(shù)據(jù)存儲 實時地理信息 校驗數(shù)據(jù) 拍照數(shù)據(jù) 基礎(chǔ)數(shù)據(jù) 定期更新緯表 …… 分布式消息隊列 Kafka sqoop/kettle/webservice/ftp/JAVA API/nifi/restapi 數(shù)據(jù)接入 文本數(shù)據(jù) 數(shù)據(jù)庫 爬蟲數(shù)據(jù) 網(wǎng)絡(luò)數(shù)據(jù)接口 其它 … flume 大數(shù)據(jù) Cluster 大數(shù)據(jù) 集群 大數(shù)據(jù)集群 13 CONFIDENTIAL 關(guān)鍵 能力三：大數(shù)據(jù)分析 數(shù)據(jù)來源 數(shù)據(jù)存儲 實時地理信息 校驗數(shù)據(jù) 拍照數(shù)據(jù) 基礎(chǔ)數(shù)據(jù) 文件 其他 redis 消息 GPS
職業(yè)教育相關(guān)推薦
鄂ICP備17016276號-1