【文章內(nèi)容簡(jiǎn)介】 姓名 手機(jī) 省市 地址 未獲取信息 客服 體驗(yàn) 智能家居 .. .. .. .. .. 未獲取信息 1. xxxx 內(nèi)部數(shù)據(jù) 外部數(shù)據(jù) 標(biāo)簽 人口屬性 產(chǎn)品特征 訂單特征 行為特征 門店 姓名 手機(jī) 省市 地址 未獲取信息 支付方式 網(wǎng)頁(yè)訪問(wèn)數(shù)據(jù) 未獲取信息 競(jìng)爭(zhēng)對(duì)手產(chǎn)品 價(jià)格 3. 瀏覽量 評(píng)分 購(gòu)買量 APP .. .. .. .. .. 未獲取信息 1. xxxx 搜房網(wǎng) 未獲取信息 樓盤 價(jià)格 體驗(yàn)環(huán)節(jié)：和數(shù)據(jù)廠商，合作或購(gòu)買統(tǒng)計(jì)數(shù)據(jù) 購(gòu)買環(huán)節(jié)：引入合作商用戶數(shù)據(jù) 合并 客戶觸點(diǎn) 數(shù)據(jù) 2023/3/2 數(shù)據(jù)清洗整合規(guī)則建模 應(yīng)用 系統(tǒng) 現(xiàn)狀 : 數(shù)據(jù)分布各地信息分離、共享程度低 消費(fèi)者信息不統(tǒng)一 無(wú)法實(shí)現(xiàn)一對(duì)一個(gè)性化精準(zhǔn)營(yíng)銷 目標(biāo) : 高度共享的集中統(tǒng)一數(shù)據(jù)平臺(tái)，統(tǒng)一消費(fèi)者視圖，實(shí)現(xiàn)精準(zhǔn)營(yíng)銷、精準(zhǔn)決策 客戶 統(tǒng) 一 元 數(shù) 據(jù) 產(chǎn)品 集中統(tǒng)一平臺(tái) 數(shù)據(jù)共享 統(tǒng)一消費(fèi)者標(biāo)識(shí) 實(shí)現(xiàn)個(gè)性化精準(zhǔn)營(yíng)銷 會(huì)員身仹信息庫(kù) 消費(fèi)行為信息庫(kù) ? 產(chǎn)品基本屬性 ? 產(chǎn)品生命周期 主 題 數(shù) 據(jù) 數(shù)據(jù)挖掘 客戶 忠誠(chéng)度 客戶消費(fèi)能力 客戶 消費(fèi) 習(xí)慣 產(chǎn)品主動(dòng)售后 客戶消費(fèi)需求 地域 消費(fèi)需求 ? 統(tǒng)一會(huì)員視圖 客群粗 粒度分析 個(gè)性化精準(zhǔn)營(yíng)銷呾關(guān)懷 個(gè)性化細(xì)粒度分析 ? 個(gè)性化精準(zhǔn)營(yíng)銷和關(guān)懷 2023/3/2 Department 35 購(gòu)買交易數(shù)據(jù) 從渠道和零售系統(tǒng)采集 用戶的交易記錄 退換貨數(shù)據(jù) 從渠道系統(tǒng)采集退換貨記錄 咨詢投訴數(shù)據(jù) 投拆 \客服 \互勱數(shù)據(jù) 從呼叫中心采集投拆數(shù)據(jù) 偶發(fā)出現(xiàn)行為數(shù)據(jù) 從 WEB\APP\電商＼門店數(shù)據(jù) CRM或合作購(gòu)買數(shù)據(jù) 從ＣＲＭ或第三方購(gòu)買數(shù)據(jù) 清洗規(guī)則 手機(jī)號(hào)匹配 姓名匹配 地址匹配 產(chǎn)品號(hào)匹配 固話匹配 郵箱匹配 會(huì)員基本信息 會(huì)員購(gòu)買的產(chǎn)品 會(huì)員存在的問(wèn)題 會(huì)員間的親友關(guān)系 會(huì)員的售后記錄 客戶數(shù)據(jù)清洗＼形成統(tǒng)一標(biāo)簽提供其他系統(tǒng)調(diào)用 基于各類業(yè)務(wù)系統(tǒng)數(shù)據(jù)分析平臺(tái)數(shù)據(jù)流架構(gòu) 在線平臺(tái) 讀取型 HBASE 細(xì)粒度數(shù)據(jù) Data Mart/Model HADOOP ODS層 /HIVE DW層 /HIVE 清洗 合并 規(guī)則 報(bào)表應(yīng)用 Pentaho 數(shù)據(jù)服務(wù) HTML5 JDBC WEB、手機(jī) Cassandra 離線平臺(tái) 讀寫型 粗粒度數(shù)據(jù) Phoenix HBASE API MongoDB 售后系統(tǒng) 實(shí)時(shí)處理 +規(guī)則引擎 Spark Streaming 業(yè)務(wù)系統(tǒng) Kafka OLTP…. 偶發(fā)行為 批處理 Sqoop 基于 Hadoop的大數(shù)據(jù)倉(cāng)庫(kù) ETL服務(wù)器 Kettle Tel: 4000031368 Website: 手機(jī)清洗邏輯 手機(jī)正則 ((\b[0]\d{2,3})?[－ _ /]*)?([1][34578]([09]{9})) 去除非數(shù)字 校驗(yàn)區(qū)號(hào) N Y 匹配字符長(zhǎng)度 11 丏匹配手機(jī)號(hào)后一位非數(shù)字 N 格式正確 格式錯(cuò)誤 原始字符長(zhǎng)度 =11 N Y 手機(jī)清洗規(guī)則模型 Tel: 4000031368 Website: 固話清洗邏輯 固話正則 ((\b[0]\\d{2,3})?[－ _ /]*)(\d{7,8})(([－ _、呼轉(zhuǎn) ])+\d{1,6})? 去除非數(shù)字 校驗(yàn)區(qū)號(hào) N Y 匹配字符長(zhǎng)度 9 丏匹配固話號(hào)后一位非數(shù)字 Y 格式正確 格式錯(cuò)誤 原始字符長(zhǎng)度 7,8位 N Y 重復(fù)數(shù)字 N N 地址清洗方案 ? 根據(jù)數(shù)據(jù)特點(diǎn)，分為兩類數(shù)據(jù)清洗方案： ? 規(guī)則 ，可以到標(biāo)準(zhǔn)地區(qū)庫(kù)標(biāo)準(zhǔn)地址 ? 規(guī)則 ，根據(jù)百度地圖 api接口 標(biāo)準(zhǔn)地址 odshive貼源層數(shù)據(jù)源 ...... 用戶基本信息表（ ） 地區(qū)代碼不為空 地區(qū)代碼為空 地區(qū)標(biāo)準(zhǔn)庫(kù) 百度 api接口 遞歸找出標(biāo)準(zhǔn)地址 返回標(biāo)準(zhǔn)地址 DWhive 模型層 地址唯一標(biāo)示清洗 ODS 業(yè)務(wù)數(shù)據(jù) 消費(fèi)者主對(duì)象 問(wèn)題數(shù)據(jù) Left Outer Join 消費(fèi)者主對(duì)象 (干凈 ) 規(guī)范性規(guī)則 消費(fèi)者主對(duì)象 (編碼 ) 對(duì)應(yīng)關(guān)系 （得出關(guān)聯(lián)客戶） 附屬表插數(shù) 應(yīng)用數(shù)據(jù)模型 （ Hbase） 增量數(shù)據(jù)清洗、加載（廢棄） 消費(fèi)者主對(duì)象 (唯一 ) 數(shù)據(jù)合并 ODS 業(yè)務(wù)增量數(shù)據(jù) 消費(fèi)者主對(duì)象 問(wèn)題數(shù)據(jù) 消費(fèi)者主對(duì)象 (干凈 ) 規(guī)范性規(guī)則 對(duì)應(yīng)關(guān)系 （得出關(guān)聯(lián)客戶） 附屬表插數(shù) 應(yīng)用數(shù)據(jù)模型 （ Hbase） 增量數(shù)據(jù)清洗、加載（保留） 合并規(guī)則 消費(fèi)者 唯一比較 唯一性比對(duì) 數(shù)據(jù)合并 存在 獲取 UID 不存在 消費(fèi)者主對(duì)象 (編碼 ) 合并 不能合并 多系統(tǒng)客戶數(shù)據(jù)整合流程圖 業(yè)務(wù)系統(tǒng)數(shù)據(jù) (biz1) 客戶表 (stage) 客戶表 (normal) 電話 ,地址 , …. 統(tǒng)一客戶表 (ods) 客戶表 (tmp) 統(tǒng)一客戶表 (ods) (唯一 ) 匹配 N (M/R) 統(tǒng)一客戶表 (ods) (唯一 ) Y 客戶表 臟數(shù)據(jù) (ods) 規(guī)則過(guò)濾 新增客戶 業(yè)務(wù)系統(tǒng)數(shù)據(jù) (biz2) 業(yè)務(wù)系統(tǒng)數(shù)據(jù) (bizx) 呾業(yè)務(wù)表關(guān)聯(lián) 客戶表 (stage) 客戶表 (stage) 整合規(guī)則實(shí)現(xiàn)順序 清洗后的用戶數(shù)據(jù) 完全去重 覆蓋手機(jī)規(guī)則 覆蓋地址規(guī)則 覆蓋固話規(guī)則 覆蓋姓名規(guī)則 手機(jī)、地址、固話、姓名完全相等 手機(jī)相等的前提下，仸意兩條記錄兩兩相比，根據(jù)規(guī)則判定這兩條記錄是否相等 用戶基本信息表 用戶聯(lián)系方式表 用戶地址信息表 用戶關(guān)聯(lián)關(guān)系表 帶唯一標(biāo)識(shí)的合并前全量用戶信息 提供客戶標(biāo)簽調(diào)用和查詢 2023/3/2 Department 46 客戶數(shù)據(jù) 客戶分群 客戶標(biāo)簽 目標(biāo)客戶 客戶接觸 呼叫中心 售后服務(wù) 營(yíng)銷活動(dòng) 導(dǎo)購(gòu) 互聯(lián)網(wǎng) 客戶關(guān)懷計(jì)劃 產(chǎn)品推薦 優(yōu)惠活動(dòng) 轉(zhuǎn)介紹 會(huì)員活動(dòng) 親情服務(wù) 營(yíng)銷活動(dòng) 公關(guān)活動(dòng) 忠誠(chéng)會(huì)員 ? 提升銷量 ? 加強(qiáng)競(jìng)爭(zhēng)地位 ? 營(yíng)銷成本底 ? 無(wú)需價(jià)格戰(zhàn) ? 有利新品推廣 通過(guò)會(huì)員關(guān)懷提高忠誠(chéng)客戶的比例 產(chǎn)品三、 360度全景畫像 打標(biāo)簽 畫像 分類群組 數(shù)據(jù)挖掘 需求特征 畫像 身份 產(chǎn)品 訂單 行為 畫像 群組 價(jià)值 挖掘 客戶＋產(chǎn)品＋訂單＋行為畫像 建立客戶 ＋產(chǎn)品 ＋行為 ＋訂單 9個(gè)屬性 180個(gè)維度 6300個(gè)觸點(diǎn) 標(biāo)簽畫像 建立客戶 ＋產(chǎn)品 ＋行為 ＋訂單 9類畫像 27群畫像 180組畫像 建立客戶 ＋產(chǎn)品 ＋行為 ＋訂單 每一類群組 的數(shù)據(jù) 價(jià)值挖掘 客戶畫像 客戶唯一基本屬性標(biāo)識(shí)標(biāo)簽 9個(gè)屬性、 180個(gè)維度 6300個(gè)觸點(diǎn) 360176。 全景畫像 姓名匹配 手機(jī)匹配 郵箱匹配 關(guān)系人鏈匹配 電話匹配 等級(jí)匹配 。 統(tǒng)一標(biāo)示代碼 35個(gè)基本人口屬性 25個(gè)區(qū)域小區(qū)樓棟房號(hào) 15個(gè) 關(guān)系群體人員屬性 15個(gè) 愛(ài)好興趣屬性 20個(gè) 使用習(xí)慣偏好屬性 20個(gè) 品牌偏好傾向?qū)傩? 15個(gè) 購(gòu)買比較條件屬性 9個(gè)門類 27個(gè)群 1800個(gè)組 喜歡 喜歡靜音 喜歡負(fù)離子清新通風(fēng) 喜歡自動(dòng)睡眠功能 喜歡粉紅色 喜歡智能定時(shí) 。 9個(gè)門類 27個(gè)群 1800個(gè)組 數(shù)據(jù)價(jià)值挖掘 高價(jià)值客戶 低價(jià)值客戶 負(fù)價(jià)值客戶 活躍客戶 流失客戶 粉絲 。 客戶畫像 20個(gè) 購(gòu)買傾向情緒 15個(gè) 購(gòu)買時(shí)間時(shí)機(jī)屬性 客戶唯一標(biāo)識(shí)標(biāo)簽 姓名匹配 電話匹配 郵箱匹配 關(guān)系人鏈匹配 訂單匹配 等級(jí)匹配 。 統(tǒng)一標(biāo)示代碼 第一步 建立客戶產(chǎn)品唯一識(shí)別標(biāo)簽 標(biāo)簽記錄客戶、產(chǎn)品特征數(shù)據(jù) 和全網(wǎng)觸點(diǎn)行為數(shù)據(jù)唯一識(shí)別 一、標(biāo)簽的唯一性 二、標(biāo)簽的精準(zhǔn)性 三、標(biāo)簽的簡(jiǎn)單明了 四、標(biāo)簽的可調(diào)用性 五、標(biāo)簽的可修改回寫 產(chǎn)品唯一識(shí)別標(biāo)簽 姓名標(biāo)示 產(chǎn)品名稱產(chǎn)品型號(hào) 產(chǎn)品參數(shù) 產(chǎn)品指標(biāo) 產(chǎn)品價(jià)格 產(chǎn)品交易量 。 統(tǒng)一產(chǎn)品標(biāo)示代碼 標(biāo)簽權(quán)重 =衰減因子 行為權(quán)重 網(wǎng)址子權(quán)重 時(shí)間衰減因子 OCRM 客戶操作型數(shù)據(jù) 與客戶互動(dòng) 電話記錄、業(yè)務(wù)操作、貨款交付 售前售中售后服務(wù)等數(shù)據(jù) CRM 客戶基本信息 姓名、電話、性別、地址 特征習(xí)好、客戶關(guān)聯(lián)關(guān)系 ACRM 客戶行為數(shù)據(jù) WEB、 WIFI、 APP點(diǎn) 擊瀏覽 POS刷卡消 費(fèi)行為 CCRM 客戶協(xié)同型數(shù)據(jù) 呼叫中心、客戶渠道、交互服務(wù) 售后回訪、拜訪數(shù)據(jù) 采集聚合客戶數(shù)據(jù) 唯一標(biāo)簽標(biāo)示 9個(gè)屬性、 180個(gè)維度 6300個(gè)觸點(diǎn) 360176。 全景畫像 姓名標(biāo)示 姓名匹配電話 匹配 郵箱匹配 關(guān)系人鏈匹配 訂單匹配 等級(jí)匹配 。 統(tǒng)一標(biāo)示代碼 統(tǒng) 一 客 戶 視 圖 第二步 客戶畫像 把來(lái)自于全網(wǎng)各種渠道混雜的客戶身仹（產(chǎn)品、訂單、行為）數(shù)據(jù)清洗統(tǒng)一標(biāo)示后的客戶特征畫像 35個(gè)基本人口屬性 25個(gè)區(qū)域社區(qū)樓棟房號(hào) 15個(gè) 關(guān)系群體人員屬性 15個(gè) 愛(ài)好興趣屬性 20個(gè) 使用習(xí)慣偏好屬性 20個(gè) 品牌偏好傾向?qū)傩? 15個(gè) 行為屬性 20個(gè) 購(gòu)買能力屬性 15個(gè) 購(gòu)買時(shí)間時(shí)機(jī)屬性 姓名性別 年齡婚育狀況 行業(yè)收入 教育程度 所在區(qū)域人口構(gòu)成 人口文化教育水準(zhǔn) 購(gòu)買品牌等級(jí) 價(jià)格 區(qū)域門店網(wǎng)購(gòu) 購(gòu)買批量評(píng)價(jià) …… . Cookie、注冊(cè) ID Email 微信微博 習(xí)慣常瀏覽網(wǎng)站類型 購(gòu)買產(chǎn)品類別特征 …… . 35個(gè)基本人口屬性 15個(gè)行為屬性 上網(wǎng)時(shí)長(zhǎng)時(shí)段頻次 20個(gè)消費(fèi)偏好購(gòu)買習(xí)慣 消費(fèi)季節(jié)周期 消費(fèi)習(xí)慣地域 接受營(yíng)銷活動(dòng)類別 …… . 消費(fèi)周期時(shí)段頻次 活動(dòng)圈子特征 …… . 社交關(guān)系網(wǎng)絡(luò) 15個(gè)關(guān)系群體人口屬性 使用年限 …… . 使用頻次時(shí)間 15個(gè)使用習(xí)慣偏好屬性 使用過(guò)程 客戶 9個(gè)屬性 180個(gè)維度 6300個(gè)觸點(diǎn)標(biāo)簽畫像 購(gòu)買品牌等級(jí) 價(jià)格 區(qū)域門店網(wǎng)購(gòu) 購(gòu)買批量評(píng)價(jià) …… . 購(gòu)買產(chǎn)品類別特征 25個(gè)區(qū)域社區(qū)樓棟房號(hào) 活動(dòng)圈子特征 …… . 業(yè)余愛(ài)好興趣 15個(gè)興趣愛(ài)好屬性 消費(fèi)批次次金額 …… . 購(gòu)買品牌等級(jí) 20個(gè)購(gòu)買能力屬性 購(gòu)買品牌等級(jí)價(jià)格 15個(gè)購(gòu)買時(shí)間時(shí)機(jī)屬性 學(xué)員維度 可提供的數(shù)據(jù)維度 基本屬性