【正文】 ?高考考生推薦各種業(yè)務(wù) ?體育場(chǎng)觀眾推薦歌星歌曲 關(guān)于 10張標(biāo)簽表，每張表 8000萬記錄，每張表幾百幾千個(gè)標(biāo)簽字段，關(guān)聯(lián)取數(shù)據(jù)，秒級(jí)出結(jié)果的高效方法 ? 大數(shù)據(jù)關(guān)聯(lián)查詢創(chuàng)新案例 方案 1：數(shù)據(jù)庫(kù)內(nèi)方案 ?把所有客戶統(tǒng)一視圖大標(biāo)簽寬表先按地市分表 ， 再按號(hào)碼分別拆分為 10000張表 。 ?如果并發(fā)線程壓力太大的話，可以考慮改為減少并發(fā)線程數(shù)，或者改為串行。 ?采用 hadoop方案后，整體數(shù)據(jù)量在千萬級(jí)，有些省例外，到了億級(jí)。 西方戰(zhàn)略家通過打勝仗檢驗(yàn)自己的理論 ， 孫子則通過不戰(zhàn)而勝檢驗(yàn)自己的理論。 這樣 ， 中國(guó)移動(dòng)就可以和應(yīng)用軟件廠商實(shí)現(xiàn)共贏 。在上班時(shí)間訪問，直接查詢內(nèi)存靜態(tài)數(shù)據(jù)，速度快，但也涉及到內(nèi)存分配太大的問題。 方案 2：數(shù)據(jù)庫(kù)外方案 ?把所有客戶統(tǒng)一視圖大標(biāo)簽寬表按地市分文件，再按號(hào)碼繼續(xù)拆分為 1000個(gè)文件。 商業(yè)智能 BI系統(tǒng)存在的問題 ?某電信運(yùn)營(yíng)商十幾年商業(yè)智能 BI系統(tǒng)建設(shè)，是否有用？ ?數(shù)據(jù)分析、數(shù)據(jù)挖掘真的重要嗎？ 某公司數(shù)據(jù)挖掘團(tuán)隊(duì)被解散，某公司數(shù)據(jù)分析團(tuán)隊(duì)被解散 ?客戶細(xì)分問題？ ?分析報(bào)告一定是正確的嗎？ 大數(shù)據(jù)、數(shù)據(jù)挖掘、數(shù)據(jù)分析真的重要嗎 ?在互聯(lián)網(wǎng)企業(yè)，以結(jié)果為導(dǎo)向，價(jià)值為主。 ?第三階段：做實(shí)時(shí)營(yíng)銷、實(shí)時(shí)分析、實(shí)時(shí)告警等等實(shí)時(shí)或準(zhǔn)實(shí)時(shí)系統(tǒng)，更接近于 OLTP系統(tǒng)，處理難度高，顛覆著傳統(tǒng)的 BI系統(tǒng)。 ?起 10000個(gè)線程并發(fā)執(zhí)行 ， 可以做到實(shí)時(shí) 。 方案 2細(xì)節(jié)： ?數(shù)據(jù)為每月或每日凌晨初始化讀入，載入到內(nèi)存后。 ?可以把節(jié)省的成本投一部分到應(yīng)用軟件廠商上 。 亨利 硬件投資改為采購(gòu)幾臺(tái) PC Server，硬件投入為幾萬元。當(dāng)數(shù)據(jù)無法做大表關(guān)聯(lián)時(shí)，每次只需從單行記錄就可去到。 ?每張小