關(guān)于我們
書單推薦
新書推薦
|
大數(shù)據(jù)實(shí)踐之路:數(shù)據(jù)中臺(tái)+數(shù)據(jù)分析+產(chǎn)品應(yīng)用 讀者對(duì)象:本書主要面向數(shù)據(jù)產(chǎn)品經(jīng)理,數(shù)據(jù)分析師、數(shù)據(jù)運(yùn)營(yíng)人員等數(shù)據(jù)行業(yè)從業(yè)者也可以在本書中找到一些思路和方法,如了解數(shù)據(jù)的應(yīng)用、掌握分析方法等。本書也可以為想轉(zhuǎn)行做數(shù)據(jù)產(chǎn)品經(jīng)理的讀者提供幫助。
本書共13 章,匯集了7 位作者(來(lái)自各大互聯(lián)網(wǎng)企業(yè))的知識(shí)總結(jié)和經(jīng)驗(yàn)分享。本書借助老湯姆、小風(fēng)、阿北、小諾在某電商企業(yè)數(shù)據(jù)部門工作的故事,通過(guò)大量案例深入淺出地介紹了數(shù)據(jù)中臺(tái)建設(shè)與應(yīng)用之路。本書以Why-What-How 的思路展開(kāi),從0 到1 介紹知識(shí)點(diǎn),并重點(diǎn)講述How 的過(guò)程,同時(shí)結(jié)合某個(gè)場(chǎng)景下的具體案例,以使讀者更好地理解實(shí)操過(guò)程。每個(gè)企業(yè)都會(huì)面臨各種各樣的數(shù)據(jù)問(wèn)題,有數(shù)據(jù)質(zhì)量的問(wèn)題、數(shù)據(jù)獲取效率的問(wèn)題、數(shù)據(jù)應(yīng)用價(jià)值的問(wèn)題等。本書首先介紹數(shù)據(jù)中臺(tái)的建設(shè),確保數(shù)據(jù)的質(zhì)量,為企業(yè)的數(shù)據(jù)質(zhì)量體系建設(shè)提供堅(jiān)實(shí)的基礎(chǔ);然后,進(jìn)行偏向深入業(yè)務(wù)的分析探索,介紹如何從數(shù)據(jù)分析角度更好地賦能業(yè)務(wù)發(fā)展;最后,介紹數(shù)據(jù)應(yīng)用,解決數(shù)據(jù)獲取效率的問(wèn)題,并把一些分析思路和業(yè)務(wù)策略沉淀為數(shù)據(jù)產(chǎn)品,從而更好地將數(shù)據(jù)應(yīng)用于業(yè)務(wù)。本書結(jié)合各大互聯(lián)網(wǎng)企業(yè)的實(shí)際項(xiàng)目案例,讓讀者真正掌握數(shù)據(jù)產(chǎn)品經(jīng)理這個(gè)新興職業(yè)的必備技能和核心能力。
林澤豐,筆名小風(fēng),某國(guó)有企業(yè)的數(shù)據(jù)中臺(tái)產(chǎn)品負(fù)責(zé)人。UBDC全域大數(shù)據(jù)峰會(huì)“燈塔人物”,“友盟杯”數(shù)據(jù)大賽三等獎(jiǎng)獲得者,公眾號(hào)“一個(gè)數(shù)據(jù)人的自留地”的課程講師。在電商、社交、交通、直播等領(lǐng)域擔(dān)任過(guò)產(chǎn)品、運(yùn)營(yíng)、數(shù)據(jù)等部門的負(fù)責(zé)人,有7年多的互聯(lián)網(wǎng)從業(yè)經(jīng)驗(yàn)?珙I(lǐng)域、跨部門實(shí)戰(zhàn)經(jīng)驗(yàn)豐富,曾從0到1搭建過(guò)企業(yè)數(shù)據(jù)中臺(tái)、大數(shù)據(jù)平臺(tái)、智能營(yíng)銷平臺(tái),擅長(zhǎng)埋點(diǎn)模型設(shè)計(jì)、指標(biāo)質(zhì)量治理、數(shù)倉(cāng)架構(gòu)、數(shù)據(jù)運(yùn)營(yíng)等。許秋貴,筆名阿北,貝殼找房的高級(jí)數(shù)據(jù)分析師,畢業(yè)于東北農(nóng)業(yè)大學(xué)。在校期間主導(dǎo)開(kāi)發(fā)了校園拼車等應(yīng)用,幫助大學(xué)生拼車省錢出行。曾就職于百度、滴滴等互聯(lián)網(wǎng)“大廠”,有多年數(shù)據(jù)分析經(jīng)驗(yàn)。陳斌,筆名小諾,某互聯(lián)網(wǎng)“大廠”的策略產(chǎn)品經(jīng)理,畢業(yè)于大連東軟信息學(xué)院。人人都是產(chǎn)品經(jīng)理網(wǎng)站的“20年度熱文作者”,公眾號(hào)“一個(gè)數(shù)據(jù)人的自留地”的聯(lián)合創(chuàng)辦人。先后就職于百度、小米,在搜索引擎、資訊、電商等領(lǐng)域從事過(guò)搜索、推薦、BI、畫像、反作弊、消息觸達(dá)等產(chǎn)品工作,涉獵范圍較廣,經(jīng)驗(yàn)豐富。陳麗媛,筆名草帽小子,自如畫像數(shù)據(jù)產(chǎn)品經(jīng)理,擁有兩項(xiàng)發(fā)明專利。人人都是產(chǎn)品經(jīng)理網(wǎng)站的專欄作家,公眾號(hào)“一個(gè)數(shù)據(jù)人的自留地”聯(lián)合創(chuàng)辦人。在用戶畫像、數(shù)據(jù)埋點(diǎn)、指標(biāo)體系、BI等方面具有豐富的實(shí)戰(zhàn)經(jīng)驗(yàn),所著系列文章深受廣大讀者喜愛(ài)。
第1 章 那些困擾我們的數(shù)據(jù)問(wèn)題 ??????????????????????????????????????????????????????????1
1.1 數(shù)據(jù)質(zhì)量的問(wèn)題 ....................................................................................... 1 1.2 數(shù)據(jù)獲取效率的問(wèn)題 ............................................................................... 5 1.3 數(shù)據(jù)應(yīng)用價(jià)值的問(wèn)題 ............................................................................... 8 數(shù)據(jù)中臺(tái)篇 第2 章 元數(shù)據(jù)中心 ?????????????????????????????????????????????????????????????????????????? 15 2.1 元數(shù)據(jù)中心概述 ..................................................................................... 16 2.2 元數(shù)據(jù)中心的核心功能 ......................................................................... 17 2.2.1 數(shù)據(jù)整合 ..................................................................................... 17 2.2.2 數(shù)據(jù)管理 ..................................................................................... 19 2.2.3 數(shù)據(jù)地圖 ..................................................................................... 25 第3 章 數(shù)據(jù)指標(biāo)中心 ??????????????????????????????????????????????????????????????????????? 29 3.1 數(shù)據(jù)指標(biāo)中心概述 ................................................................................. 30 3.2 數(shù)據(jù)指標(biāo)中心的設(shè)計(jì)思路 ..................................................................... 30 3.2.1 定義指標(biāo)并將其歸集到對(duì)應(yīng)的主題域 ....................................... 30 3.2.2 拆分原子指標(biāo)與派生指標(biāo) .......................................................... 31 3.2.3 定義原子指標(biāo)與派生指標(biāo)的生產(chǎn)邏輯 ....................................... 32 3.2.4 通過(guò)指標(biāo)管理平臺(tái)對(duì)指標(biāo)進(jìn)行規(guī)范生產(chǎn) ................................... 33 第4 章 數(shù)倉(cāng)模型中心 ??????????????????????????????????????????????????????????????????????? 37 4.1 數(shù)倉(cāng)模型中心概述 ................................................................................. 38 4.2 數(shù)倉(cāng)模型中心的設(shè)計(jì)思路 ..................................................................... 39 4.2.1 控制數(shù)據(jù)源 ................................................................................. 39 4.2.2 劃分主題域 ................................................................................. 39 4.2.3 構(gòu)建一致性維度 ......................................................................... 41 4.2.4 構(gòu)建總線矩陣 ............................................................................. 42 4.2.5 數(shù)倉(cāng)分層建設(shè) ............................................................................. 42 4.2.6 數(shù)倉(cāng)效果評(píng)估 ............................................................................. 43 第5 章 數(shù)據(jù)資產(chǎn)中心 ??????????????????????????????????????????????????????????????????????? 47 5.1 數(shù)據(jù)資產(chǎn)中心概述 ................................................................................. 48 5.2 數(shù)據(jù)資產(chǎn)中心的治理流程 ..................................................................... 49 5.2.1 數(shù)據(jù)資產(chǎn)定級(jí) ............................................................................. 49 5.2.2 數(shù)據(jù)資產(chǎn)質(zhì)量治理 ..................................................................... 52 5.2.3 數(shù)據(jù)資產(chǎn)成本治理 ..................................................................... 56 第6 章 數(shù)據(jù)服務(wù)中心 ??????????????????????????????????????????????????????????????????????? 61 6.1 數(shù)據(jù)服務(wù)中心概述 ................................................................................. 62 6.2 數(shù)據(jù)服務(wù)中心的設(shè)計(jì)思路 ..................................................................... 62 6.2.1 將數(shù)據(jù)寫入查詢庫(kù) ..................................................................... 62 6.2.2 搭建元數(shù)據(jù)模型 ......................................................................... 63 6.2.3 按主題歸類 ................................................................................. 65 6.2.4 緩存優(yōu)化 ..................................................................................... 65 6.2.5 數(shù)據(jù)接口化 ................................................................................. 67 6.2.6 構(gòu)建API 集市 ............................................................................. 68 6.2.7 統(tǒng)一數(shù)據(jù)服務(wù) ............................................................................. 68 數(shù)據(jù)分析篇 第7 章 數(shù)據(jù)分析理論 ??????????????????????????????????????????????????????????????????????? 73 7.1 業(yè)務(wù)和數(shù)據(jù) ............................................................................................ 73 7.1.1 業(yè)務(wù)和數(shù)據(jù)的閉環(huán) ..................................................................... 74 7.1.2 不同崗位的職責(zé)邊界與合作 ...................................................... 75 7.1.3 數(shù)據(jù)、信息和知識(shí) ..................................................................... 75 7.1.4 業(yè)務(wù)策略的閉環(huán) ......................................................................... 77 7.1.5 人人都會(huì)數(shù)據(jù)分析的趨勢(shì) .......................................................... 78 7.2 數(shù)據(jù)分析師的全貌 ................................................................................. 79 7.2.1 數(shù)據(jù)分析的定義與流程 .............................................................. 79 7.2.2 數(shù)據(jù)分析的3 種場(chǎng)景 .................................................................. 82 7.2.3 數(shù)據(jù)分析師的核心能力 .............................................................. 84 7.2.4 數(shù)據(jù)分析師的職業(yè)素養(yǎng) .............................................................. 85 7.2.5 數(shù)據(jù)分析師的工作內(nèi)容 .............................................................. 86 7.2.6 數(shù)據(jù)分析師的考核 ..................................................................... 86 7.3 數(shù)據(jù)分析團(tuán)隊(duì)的組織架構(gòu)及其對(duì)應(yīng)的工作模式 ................................... 88 7.3.1 數(shù)據(jù)分析團(tuán)隊(duì)的組織架構(gòu) .......................................................... 88 7.3.2 不同組織架構(gòu)的工作模式 .......................................................... 89 7.4 數(shù)據(jù)分析師的工作方式 ......................................................................... 90 7.4.1 工作象限圖 ................................................................................. 91 7.4.2 1+N 的工作內(nèi)容 ......................................................................... 91 7.4.3 與業(yè)務(wù)方的合作模式 .................................................................. 92 7.4.4 有關(guān)工作方式常見(jiàn)問(wèn)題的解法思考 ........................................... 94 第8 章 數(shù)據(jù)分析實(shí)操 ??????????????????????????????????????????????????????????????????????? 97 8.1 預(yù)測(cè)性分析 ............................................................................................ 97 8.1.1 預(yù)測(cè)性分析的目的 ..................................................................... 98 8.1.2 分析思路與方法 ......................................................................... 99 8.1.3 預(yù)測(cè)性分析案例 ......................................................................... 99 8.2 描述性分析 .......................................................................................... 101 8.2.1 描述性分析的目的 ................................................................... 101 8.2.2 分析思路與方法 ....................................................................... 102 8.2.3 描述性分析案例 ....................................................................... 103 8.3 診斷性分析 .......................................................................................... 104 8.3.1 診斷性分析的目的 ................................................................... 105 8.3.2 分析思路與方法 ....................................................................... 105 8.4 數(shù)據(jù)分析報(bào)告 ...................................................................................... 110 8.4.1 數(shù)據(jù)分析報(bào)告的定位 ................................................................ 110 8.4.2 預(yù)測(cè)性分析報(bào)告的結(jié)構(gòu) ............................................................ 111 8.4.3 描述性分析報(bào)告的結(jié)構(gòu) ............................................................ 111 8.4.4 診斷性分析報(bào)告的結(jié)構(gòu) ............................................................ 112 數(shù)據(jù)應(yīng)用篇 第9 章 BI 系統(tǒng) ??????????????????????????????????????????????????????????????????????????????? 117 9.1 讓人頭疼的看板需求 ........................................................................... 117 9.2 BI 系統(tǒng)介紹 ......................................................................................... 119 9.2.1 什么是BI 系統(tǒng) ......................................................................... 119 9.2.2 BI 系統(tǒng)有哪些 .......................................................................... 119 9.2.3 BI 系統(tǒng)的相關(guān)人員................................................................... 120 9.2.4 BI 系統(tǒng)的特點(diǎn) .......................................................................... 121 9.3 BI 系統(tǒng)的關(guān)鍵技術(shù) .............................................................................. 122 9.4 BI 系統(tǒng)實(shí)踐 ......................................................................................... 124 9.4.1 數(shù)據(jù)接入 ................................................................................... 125 9.4.2 數(shù)據(jù)集加工 ............................................................................... 127 9.4.3 數(shù)據(jù)集權(quán)限控制 ....................................................................... 129 9.4.4 可視化報(bào)表配置 ....................................................................... 130 9.4.5 可視化結(jié)果展示 ....................................................................... 136 9.4.6 數(shù)據(jù)分析OLAP ........................................................................ 137 9.4.7 如何衡量BI 系統(tǒng)是否成功 ...................................................... 142 第10 章 用戶畫像 ?????????????????????????????????????????????????????????????????????????? 143 10.1 用戶畫像的全貌 ................................................................................. 143 10.1.1 初識(shí)用戶畫像 ......................................................................... 144 10.1.2 基本概念 ................................................................................. 145 10.1.3 用戶畫像體系建設(shè) .................................................................. 146 10.1.4 人員配合流程 ......................................................................... 149 10.2 用戶畫像的需求 ................................................................................. 150 10.2.1 對(duì)內(nèi)需求盤點(diǎn) ......................................................................... 151 10.2.2 對(duì)外競(jìng)品調(diào)研 ......................................................................... 156 10.3 用戶畫像的規(guī)劃 ................................................................................. 158 10.3.1 用戶畫像的業(yè)務(wù)架構(gòu) .............................................................. 158 10.3.2 用戶畫像的產(chǎn)品架構(gòu) .............................................................. 159 10.3.3 用戶畫像的版本計(jì)劃 .............................................................. 162 10.3.4 用戶畫像的項(xiàng)目執(zhí)行計(jì)劃 ...................................................... 163 10.4 用戶ID 體系 ...................................................................................... 164 10.4.1 方法 ........................................................................................ 164 10.4.2 實(shí)施過(guò)程 ................................................................................. 166 10.5 標(biāo)簽體系 ............................................................................................ 167 10.5.1 標(biāo)簽分類 ................................................................................. 168 10.5.2 標(biāo)簽分級(jí) ................................................................................. 175 10.6 用戶畫像系統(tǒng)..................................................................................... 177 10.6.1 概述 ........................................................................................ 177 10.6.2 首頁(yè) ........................................................................................ 178 10.6.3 洞察 ........................................................................................ 179 10.6.4 標(biāo)簽廣場(chǎng) ................................................................................. 180 10.6.5 人群 ........................................................................................ 181 10.6.6 系統(tǒng)管理 ................................................................................. 183 10.6.7 總結(jié) ........................................................................................ 183 10.7 用戶畫像的應(yīng)用 ................................................................................. 183 第11 章 電商反作弊體系 ????????????????????????????????????????????????????????????????? 189 11.1 “網(wǎng)絡(luò)黑產(chǎn)”的現(xiàn)狀 ......................................................................... 189 11.1.1 “網(wǎng)絡(luò)黑產(chǎn)薅羊毛”事件 ...................................................... 189 11.1.2 “網(wǎng)絡(luò)黑產(chǎn)”的類型 .............................................................. 190 11.1.3 電商“薅羊毛”場(chǎng)景 .............................................................. 191 11.1.4 “網(wǎng)絡(luò)黑產(chǎn)”的發(fā)展趨勢(shì) ...................................................... 192 11.1.5 “網(wǎng)絡(luò)黑產(chǎn)”的作弊工具 ...................................................... 192 11.2 “網(wǎng)絡(luò)黑產(chǎn)”的防控方案 .................................................................. 194 11.2.1 活動(dòng)的損失評(píng)估...................................................................... 194 11.2.2 反“網(wǎng)絡(luò)黑產(chǎn)”作弊案例 ...................................................... 194 第12 章 內(nèi)容個(gè)性化推薦 ????????????????????????????????????????????????????????????????? 201 12.1 資訊的內(nèi)容處理 ................................................................................. 201 12.1.1 資訊的內(nèi)容來(lái)源 ..................................................................... 202 12.1.2 資訊的分類體系 ..................................................................... 203 12.1.3 常見(jiàn)的分類問(wèn)題及內(nèi)容分類原則 ........................................... 205 12.1.4 分類體系的構(gòu)建 ..................................................................... 206 12.1.5 內(nèi)容的標(biāo)注與機(jī)器學(xué)習(xí) .......................................................... 208 12.2 資訊用戶的畫像和特征 ..................................................................... 209 12.2.1 資訊用戶的畫像 ..................................................................... 209 12.2.2 資訊用戶的特征 ..................................................................... 209 12.3 資訊的推薦算法 ................................................................................. 211 12.3.1 資訊的信息抽取 ..................................................................... 211 12.3.2 資訊的分詞方法 ..................................................................... 212 12.3.3 資訊的過(guò)濾排重 ..................................................................... 213 12.3.4 資訊的召回模型 ..................................................................... 214 12.3.5 資訊的算法排序 ..................................................................... 216 12.4 資訊的重排策略及案例 ..................................................................... 216 12.4.1 常見(jiàn)的重排策略及策略的目標(biāo) ............................................... 216 12.4.2 資訊的重排策略案例 .............................................................. 217 第13 章 電商個(gè)性化推送 ????????????????????????????????????????????????????????????????? 221 13.1 push 的衡量 ........................................................................................ 222 13.1.1 push 的目標(biāo)與本質(zhì) ................................................................. 222 13.1.2 push 的衡量指標(biāo) ..................................................................... 222 13.2 push 的優(yōu)化方向 ................................................................................ 223 13.2.1 效率高 .................................................................................... 223 13.2.2 算法準(zhǔn) .................................................................................... 224 13.2.3 推薦好 .................................................................................... 226 13.2.4 展示靚 .................................................................................... 227 13.3 push 的推薦案例 ................................................................................ 228 13.3.1 新用戶推薦方案 ..................................................................... 228 13.3.2 推薦的效果評(píng)測(cè) ..................................................................... 232
你還可能感興趣
我要評(píng)論
|