【正文】 er CAPIattached Flash model for NoSQL regains infrastructure control and reigns in the cost to deliver services.Power8創(chuàng)新 NoSQL方案與現(xiàn)有 NoSQL方案比較10GbLargememoryEliminationDrawer40basedPOWER840TBDifferentiatedNode10GbFlashSystemanbeworkloadmeansAdvantage:? NewGBNode500GBinScaleoutassolutions? HelpsectorsnotS822LS822LP8TBSmall+SASNumberSASTBTBRPMType ”thanHadoop9 Petabytes 其他數(shù)據(jù)資產(chǎn) 市 場數(shù)據(jù)量增 長 1,750%, 2023064數(shù)據(jù)爆炸的時代，贏得數(shù)據(jù)才能贏得世界數(shù)據(jù)是新的自然資源基于數(shù)據(jù)的決策更加復(fù)雜更加重要數(shù)據(jù)的爆炸式增長超出系統(tǒng)能力大數(shù)據(jù)計(jì)算需要什么樣的硬件平臺？? OLAP?DW?benchmark,GB/sec內(nèi)存 帶寬單 臺 Power8服 務(wù) 器最多可支持 SFF+10KLFFAvailableS822LEXP24SLargeDCS3700LargeDCS3700Power大數(shù)據(jù)最佳 實(shí) 踐從 計(jì) 算密集型到數(shù)據(jù)密集型都有靈活的配比方案性能、容量和成本的最佳平衡ComputeDenseStorageDensePower8 無處不在的 RAS?處理器指令重試?備用處理器恢復(fù)?可選擇動態(tài)固件更新?Chip kill 內(nèi)存?ECC 二級緩存、三級緩存?帶故障監(jiān)控功能的服務(wù)處理器?熱插拔磁盤托架?熱插拔并發(fā)維護(hù) PCIe 插槽?熱插拔冗余電源和散熱風(fēng)扇?動態(tài)處理器重新分配?PCI 插槽上的擴(kuò)展錯誤處理Power8遠(yuǎn)超 x86的高可靠設(shè)計(jì)CustomHardwareApplicationPOWER8CAPPCoherence BusPSLFPGA or ASIC可自定 義 的硬件 應(yīng) 用程序加速器? 特定的系 統(tǒng)軟 件、中 間 件或用 戶應(yīng) 用程序? 寫入 PSL 提供的持久接口 POWER8PCIe Gen 3Transport for encapsulated messagesProcessor Service Layer (PSL)?向 應(yīng) 用程序提供成熟的、 穩(wěn) 定的接口? 降低 CAPP 的復(fù) 雜 性和工作 負(fù)載虛 擬尋 址? 加速器可以與 處 理器一 樣 直接 對 內(nèi)存 進(jìn) 行 尋 址? 與 處 理器運(yùn)行程序一 樣 使用指 針? 消除操作系 統(tǒng) 和 設(shè)備驅(qū)動 程序的 額 外開 銷Power8創(chuàng)新 CAPI接口，開放定制硬件加速硬件管理的 緩 存一致性? 使得加速器能作 為 正常 線 程參與 “ Locks” ，降低 IO 通信模型中的延 遲基于 Power8 CAPI加速接口，為大數(shù)據(jù)進(jìn)行硬件創(chuàng)新Agenda? Power，為大數(shù)據(jù)而設(shè)計(jì)? Power 大數(shù)據(jù)方案介紹大數(shù)據(jù)方案介紹? 應(yīng)用場景和案例分享企業(yè)級市場的大數(shù)據(jù)應(yīng)用機(jī)會Key Industry Opportunity and TrendsTele, Banking and Government contribute the largest incremental Big Data Analytics market size from 2023 to 2023 in GCG? MoreonmoretheirtolimitedinfrastructureLoadCache+RAMFLASHreduceafor40ServerFlashCAPItoClusterthreadsmemoryandRequirementsnodeCacheCAPI開放硬件 創(chuàng) 新方案 …… 提供無限可能Google? 35xofFasterMontespeedGate良好的 Database 占優(yōu)16 數(shù)據(jù)的刪除操作 —— 刪除部分?jǐn)?shù)據(jù) 測試數(shù)據(jù)庫大表的刪除速度 占優(yōu)17 數(shù)據(jù)的 rollback操作 測試數(shù)據(jù)庫大表的刪除后 rollback的效率 占優(yōu)18 數(shù)據(jù)的刪除操作 —— 整表刪除 測試數(shù)據(jù)庫大表的刪除效率， truncate table 占優(yōu)占優(yōu)比例 94%2023年在某移動客戶進(jìn)行的對比測試，證明 Power+DB2onI/O 用戶統(tǒng)一管理252。Data,Hive,PPM? BatchAdvancedResource⑥ 基于用戶的數(shù)據(jù)共享和安全隔離機(jī)制⑦ 健全的圖形化監(jiān)控管理用戶界面⑧ 對開源版本 Hadoop及各種新型數(shù)據(jù)工具的開放兼容能力，支持一個平臺同時運(yùn)行多個Hadoop/YARN版本及實(shí)例。ReduceUniversalAmazonICStoreAgenda? Power，為大數(shù)據(jù)而設(shè)計(jì)? Power 大數(shù)據(jù)方案介紹? 應(yīng)用場景和案例分享應(yīng)用場景和案例分享某運(yùn)營商流計(jì)算案例 Streams44? 網(wǎng)絡(luò)質(zhì)量實(shí)時監(jiān)測– 數(shù)據(jù)規(guī)模大，大于 10萬 /秒的信令– 實(shí)時洞察網(wǎng)絡(luò)質(zhì)量指標(biāo)? 實(shí)時分析 CDR – 短頻話單分析– 短頻話單分析并按小區(qū) /號段統(tǒng)計(jì)– 切換頻話單– 異常話單– 單通話單– 掉話率分析? 測試結(jié)果（ CDR/秒）– 配置： 2GHz * 4核 * 2臺服務(wù)器– 單節(jié)點(diǎn)： 702083– 兩節(jié)點(diǎn)： 140000按小區(qū)或號段 緯 度 統(tǒng)計(jì) 短 頻話單 ：占用 時長 小于 15秒的通 話 ，且同一主叫和被叫的兩通通 話間 隔小于 20秒重復(fù)小區(qū)切 換話單 .剔除 業(yè)務(wù) 臺號 碼 ；按照小區(qū) 維 度 統(tǒng)計(jì)滿 足條件 2的 話單 數(shù)包含設(shè)備和業(yè)務(wù)種類多，涉及指標(biāo)多，數(shù)據(jù)量大不斷的增大等挑戰(zhàn)．需要有一個實(shí)時分析平臺解決實(shí)時分析網(wǎng)絡(luò)質(zhì)量問題，優(yōu)化網(wǎng)絡(luò)設(shè)備提高客戶滿意度．某運(yùn)營商數(shù)據(jù)倉庫案例： Power+DB2 DPF128節(jié)點(diǎn)的典型 sharednothing MPP數(shù)據(jù)倉庫，數(shù)據(jù)庫可用容量已超過 500TB。128GB4disk252。x252。IB1:400? 作 業(yè) 吞吐量 (批 處 理 ,和 應(yīng) 用的全球 資 源共享 視圖48Power+DB2 BLU內(nèi)存分析案例企 業(yè) ETL應(yīng) 用DB2 BLU加速原來 Row數(shù)據(jù) 庫 中需要執(zhí) 行 2小 時 20分的 ETL過 程 縮 減到 3分30秒即可完成，整體提升性能 30倍，硬件 環(huán) 境： Power7 16Cores；128GBOur BI solution is built on a Cognos/DB2,With BLU Acceleration, we have been able to reduce the time spent on preaggregation from one hour to two minutes. ?BLU Acceleration is truly amazing.–Yong Zhou, Sr. Manager of Data Warehouse Business Intelligence Department, Taikang Life Insurance企 業(yè) 數(shù)據(jù) 倉庫應(yīng) 用，承擔(dān)全行 報 表表查詢 ，數(shù)據(jù)供 給?作 為 企 業(yè) 入 門級 數(shù)據(jù) 倉庫 系 統(tǒng) 與 Row數(shù)據(jù) 庫 相比性能提升 15倍。Reduce)? 自定 義 服 務(wù) ,? 處 理國內(nèi)增 長 的 風(fēng)險 ,定價 應(yīng) 用和其他的商 務(wù)應(yīng) 用 ,與 SAS,天?14能 夠 持 續(xù)維 持 70%某省移動企業(yè)級多租戶大數(shù)據(jù)平臺30臺 7R1單臺 7R1配置： 8core128GB54SAS252。x242 RedhatotherconnectsapplicationsCompute FarmGSSCIFSCinder SwiftGlanceManilaVMwareSRMVADPVAAI vSphereSingle name spaceIBM Spectrum ScaleShare/② 多樣化的資源調(diào)度策略，如支持優(yōu)先級、獨(dú)占、按 比例 共享、點(diǎn)對點(diǎn)借還、搶占