格力大數(shù)據(jù)項(xiàng)目工作說(shuō)明書(shū)(編輯修改稿)
2024-08-30 05:11 本頁(yè)面
【文章內(nèi)容簡(jiǎn)介】 內(nèi)存數(shù)據(jù)庫(kù) 內(nèi)存數(shù)據(jù)庫(kù)是將全部數(shù)據(jù)駐留內(nèi)存的分析型數(shù)據(jù)庫(kù)系統(tǒng)，采用內(nèi)存計(jì)算技術(shù)，從根本上解決了數(shù)據(jù)倉(cāng)庫(kù)由于磁盤(pán)I/O導(dǎo)致的性能瓶頸問(wèn)題，具有性能高、成本低、靈活、可擴(kuò)展等眾多優(yōu)良特性，尤其適合做為大數(shù)據(jù)的計(jì)算引擎、分析引擎使用。 把熱點(diǎn)數(shù)據(jù)加載到內(nèi)存數(shù)據(jù)庫(kù)中，提供交互式探查分析、智能查詢分析等功能。 交互式探查分析 基于內(nèi)存數(shù)據(jù)庫(kù)快速查詢，使用明細(xì)數(shù)據(jù)，免去清洗、聚合過(guò)程，更快速地分析和揭露數(shù)據(jù)中蘊(yùn)含的問(wèn)題,直接由業(yè)務(wù)人員使用，免去提需求、澄清、確認(rèn)溝通環(huán)節(jié)，快速實(shí)現(xiàn)分析意圖，提高了發(fā)現(xiàn)和解決問(wèn)題的效率使用時(shí)可由全部數(shù)據(jù)快速過(guò)濾出關(guān)注的部分?jǐn)?shù)據(jù)進(jìn)行分析；關(guān)注數(shù)據(jù)的特征可進(jìn)一步由明細(xì)數(shù)據(jù)刻畫(huà)、佐證；可按需保存分析場(chǎng)景、導(dǎo)出明細(xì)數(shù)據(jù)付諸解決。 優(yōu)異的用戶體驗(yàn)，以客戶體驗(yàn)為中心設(shè)計(jì)，側(cè)重易理解（業(yè)務(wù)視角，選擇、過(guò)濾、分析）、易用（平鋪、圖形操作）、去除干擾（功能隱藏）、快速響應(yīng)（內(nèi)存計(jì)算）、增加趣味性（改分檔數(shù)）。 數(shù)據(jù)可視化應(yīng)用 提供通過(guò)實(shí)時(shí)查詢、產(chǎn)品統(tǒng)計(jì)功能，不做個(gè)性化推送。 語(yǔ)音智能分析大數(shù)據(jù)平臺(tái)提供語(yǔ)言智能分析，通過(guò)錄入語(yǔ)言，將語(yǔ)言轉(zhuǎn)換為文本，并對(duì)文本進(jìn)行分詞和語(yǔ)義分析，提交到大數(shù)據(jù)平臺(tái)完成產(chǎn)品產(chǎn)品及銷售數(shù)據(jù)的查詢、統(tǒng)計(jì)及分析的功能。 文本、視頻、圖片存儲(chǔ)大數(shù)據(jù)平臺(tái)增加文本、音視頻、圖片等非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)。 大數(shù)據(jù)平臺(tái)運(yùn)維監(jiān)控提供格力大數(shù)據(jù)平臺(tái)管理、運(yùn)維工具及說(shuō)明，包括服務(wù)器和運(yùn)維系統(tǒng)都正常運(yùn)行，運(yùn)維系統(tǒng)可以對(duì)集群所有物理機(jī)進(jìn)行性能監(jiān)控，包括但不限于以下指標(biāo)：CPU使用率、內(nèi)存使用率、硬盤(pán)利用率、網(wǎng)絡(luò)流量、IO負(fù)載、系統(tǒng)負(fù)載均值、ETL監(jiān)控、數(shù)據(jù)質(zhì)量監(jiān)控、等服務(wù)器性能指標(biāo)進(jìn)行監(jiān)控。運(yùn)維要考慮大數(shù)據(jù)平臺(tái)的可擴(kuò)展性，支持： 在線添加節(jié)點(diǎn) 服務(wù)擴(kuò)展 組件的升級(jí) 異常處理： 掛了的節(jié)點(diǎn)如何恢復(fù)，記錄日志方便追蹤 大數(shù)據(jù)平臺(tái)任務(wù)調(diào)度任務(wù)調(diào)度系統(tǒng)能夠?qū)Ω黝惾蝿?wù)進(jìn)行配置、啟動(dòng)、跟蹤。同時(shí)，應(yīng)并具備任務(wù)聯(lián)動(dòng)能力，即可以將多個(gè)任務(wù)通過(guò)流程組裝成一個(gè)聯(lián)合任務(wù)，各任務(wù)之間存在相互制約關(guān)系，任務(wù)調(diào)度管理能夠根據(jù)各任務(wù)的執(zhí)行狀態(tài)、結(jié)果來(lái)自動(dòng)的啟動(dòng)后續(xù)任務(wù)，任務(wù)間允許并發(fā)及串行兩種模式。要求各任務(wù)的配置應(yīng)當(dāng)為可視化的配置。對(duì)于任務(wù)啟動(dòng)至少包括定時(shí)啟動(dòng)和條件啟動(dòng)兩種模式。同時(shí)允許管理員進(jìn)行任務(wù)的手動(dòng)執(zhí)行。任務(wù)執(zhí)行可設(shè)定優(yōu)先級(jí)，比如按銷售 技術(shù) 質(zhì)量 售后(銷售量大的 銷售量小的生產(chǎn)檢驗(yàn)來(lái)設(shè)定。 ETL過(guò)程可視化 ETL盡量滿足可配置性及可視化操作，如果甲方購(gòu)買了第三方ETL可視化工具如kettle、Dataflow、Syncsoft等工具，乙方應(yīng)支持甲方做集成工作。 培訓(xùn)工作從格力大數(shù)據(jù)平臺(tái)未來(lái)的使用及運(yùn)行來(lái)看，北京西塔提供的培訓(xùn)將達(dá)到如下的目標(biāo)：216。 完成知識(shí)的轉(zhuǎn)移承建單位開(kāi)發(fā)完成一個(gè)軟件系統(tǒng)后，將通過(guò)培訓(xùn)工作實(shí)現(xiàn)知識(shí)的轉(zhuǎn)移，不僅包括軟件系統(tǒng)的使用方法，同樣還包括業(yè)務(wù)理念、系統(tǒng)運(yùn)行維護(hù)方法、技術(shù)開(kāi)發(fā)方法等滿足系統(tǒng)未來(lái)業(yè)務(wù)拓展需要的各項(xiàng)技能與方法。216。 實(shí)現(xiàn)全員的應(yīng)用應(yīng)用系統(tǒng)的建設(shè)目標(biāo)即要建設(shè)一個(gè)全員參與使
環(huán)評(píng)公示相關(guān)推薦
鄂ICP備17016276號(hào)-1