intel智慧交通解決方案(編輯修改稿)
2025-01-17 21:51 本頁面
【文章內容簡介】 高可擴展高性能的分布式系 統(tǒng) – 結合 Intel的硬件部門，提供全面的 軟硬件解決方案 – 為 Intel硬件平臺進行優(yōu)化，提供更 高性能。 Complex MPP Systems (50TB, realtime analytics) Apache Hadoop (Petabytes,batch analytics) Structured Data Collector Sqoop Flume Coordination Zookeeper 3. Map/Reduce Distributed Processing Framework HBase Realtime Distributed Big Table HDFS HadoopDistributed File System Hive SQLlike Query Pig Data manipulation Hadoop Manager Deployment, Configuration, Monitoring,Alerting and Kerberos 英特爾企業(yè)級 Hadoop堆棧 為什么選擇英特爾企業(yè)級 Hadoop大數據平臺 更高性能 ? ? ? 基于 Hadoop底層的大量優(yōu)化算法，使應 用效率更高、計算存儲分布更均衡 系統(tǒng)安裝程序計算得出的參數配置，適 合大多數應用情況 與硬件技術相結合，提高平臺性能 企業(yè)級服務 ? ? ? 全面測試的企業(yè)級發(fā)行版，保證長期穩(wěn) 定運行 集成最新開源的和自行開發(fā)的補丁，用 戶可以及時修正漏洞 保證各個部件之間的一致性，使應用順 易于管理 ? 提供獨有的基于瀏覽器的集群安裝和管 理界面，解決開源版本管理困難的問題 ? 提供網頁、郵件和短信方式的系統(tǒng)異常 報警 滑運行 功能增強 ? 提供跨數據中心的 HBase數據庫虛擬大表 功能 ? 實現 HBase數據庫復制和備份功能 ? 其他針對企業(yè)用戶需要的增強功能 Intel對 hadoop的性能優(yōu)化 21 () 700 Open Source HBase 3500 Optimized HDFS I/O () Balancing 25000 Open Source HBase 82023 Advanced Region ? 為企業(yè)級應用而優(yōu)化： 優(yōu)化后的 HBase與開源版本的性能差異 ? ? 性能數據在 8臺服務器組成的小規(guī)模集群上測試得到 服務器配置： E52680 8核 CPU, 64GB內存， 8塊 7200rpm SATA硬盤 , 千兆以太網 query/s 3500 3000 2500 2023 1500 1000 500 0 insertion/s 100000 80000 60000 40000 20230 0 ? ? 基于 HBase數據庫 ? 平均每秒每服務器插入 10000條記錄 (雙路 , 32GB) (每條記錄大約 1KB) ? 數據查詢 : 平均每秒每服務器大于 400 次查詢，查詢時延小于 1秒 (在不同壓 力下 ~ ) 每次查詢返回一個用戶一個月的移動詳細記錄 跨數據中心大表 ? ? ? ? ? ? ? 全局虛擬大表 大表數據分區(qū)存放在物理分中心 多個分中心位于不同地理位置 分中心之間由網絡互連 接入任何分中心可訪問全局數據 高可用性 適合本地高速寫入 ? 分布式聚合計算，避免大數據傳輸 虛擬大表 分中心 A 分中心 B 分中心 C 直觀集群管理工具簡化管理 ? ? 基于瀏覽器的圖形化分布式集群管理軟件。它提供配
環(huán)評公示相關推薦
鄂ICP備17016276號-1