本書以“認識大數(shù)據(jù)技術(shù),理解大數(shù)據(jù)案例;提升大數(shù)據(jù)素養(yǎng),服務(wù)大數(shù)據(jù)戰(zhàn)略”為編寫目標,全面系統(tǒng)地講述了大數(shù)據(jù)所涉及的國家政策、經(jīng)濟、產(chǎn)業(yè)鏈和技術(shù)發(fā)展。主要內(nèi)容包括信息技術(shù)的發(fā)展現(xiàn)狀、大數(shù)據(jù)時代到來的成因、大數(shù)據(jù)發(fā)展現(xiàn)狀、大數(shù)據(jù)技術(shù)概況、典型案例解析、貴州省大數(shù)據(jù)產(chǎn)業(yè)發(fā)展概況、國家大數(shù)據(jù)政策解讀、大數(shù)據(jù)人才培養(yǎng)、大數(shù)據(jù)的標準和大數(shù)據(jù)安全等內(nèi)容。
從大數(shù)據(jù)的產(chǎn)生、發(fā)展現(xiàn)狀、技術(shù)概況、政策解讀和發(fā)展趨勢等方面進行了解讀,并結(jié)合眾多實際應(yīng)用案例,特別是結(jié)合貴州省對大數(shù)據(jù)發(fā)展的指導政策,積累的經(jīng)驗、方法與案例等方面,用通俗易懂的語言把復(fù)雜的事情解釋清楚,內(nèi)容豐富、行文流暢、通俗易懂,是一本零基礎(chǔ)的大數(shù)據(jù)知識讀本
夏道勛,廈門大學人工智能博士,副教授,碩士生導師。貴州師范大學數(shù)據(jù)科學與大數(shù)據(jù)技術(shù)系主任、校企合作部主任,貴州省教育大數(shù)據(jù)技術(shù)應(yīng)用工程實驗室副主任,貴州師范大學大數(shù)據(jù)安全重點實驗室副主任,全國高校大數(shù)據(jù)教育聯(lián)盟數(shù)據(jù)科學與大技術(shù)專業(yè)教材專家指導委員會委員。 先后主持國家自然科學基金項目1項(地區(qū)基金),貴州省自然科學基金項目2項、校級項目2項,博士啟動基金1項;參與國家自然基金項目1項、863項目1項、貴州省自然科學基金項目1項。共發(fā)表SCI、EI以及中文核心期刊等論文。
第一講 信息技術(shù)發(fā)展現(xiàn)狀 1
第一節(jié) 計算機技術(shù)的發(fā)展概況 1
一、電子管誕生,第一代通用計算機問世 1
二、晶體管誕生,第二代電子計算機問世 2
三、集成電路高速發(fā)展 3
四、計算機硬件飛速發(fā)展 4
五、計算機軟件層出不窮 10
第二節(jié) 網(wǎng)絡(luò)技術(shù)的發(fā)展概況 14
一、網(wǎng)絡(luò)技術(shù)的發(fā)展史 14
二、計算機網(wǎng)絡(luò)類型的劃分 15
三、互聯(lián)網(wǎng)面臨的問題 17
四、基于IPv6的下一代互聯(lián)網(wǎng) 17
五、無線網(wǎng)絡(luò) 18
第三節(jié) 通信技術(shù)的發(fā)展概況 19
一、信息傳遞方式的成長歷程 19
二、中國5G之花 22
三、智能手機操作系統(tǒng) 23
四、我國北斗衛(wèi)星導航系統(tǒng) 25
五、移動App 25
第四節(jié) 傳感技術(shù)的發(fā)展概況 26
一、傳感器的分類 27
二、智能手機中的傳感器 27
三、傳感器的產(chǎn)業(yè)發(fā)展 28
小結(jié) 29
第二講 大數(shù)據(jù)時代到來的成因 30
第一節(jié) 信息化建設(shè)改變了人們的生活和工作方式 30
一、智能化帶來美好生活每一天 30
二、智能化催生人們的“定制生活” 32
三、信息對稱使數(shù)字經(jīng)濟高速增長 32
第二節(jié) 行業(yè)信息化的發(fā)展現(xiàn)狀 33
一、企業(yè)信息系統(tǒng)結(jié)構(gòu)設(shè)計的變遷 33
二、行業(yè)信息化建設(shè)整體規(guī)劃五要素 35
三、行業(yè)信息化建設(shè) 37
第三節(jié) 信息化建設(shè)面臨的瓶頸 40
一、互聯(lián)網(wǎng)上的一分鐘 40
二、急需突破的四大瓶頸 40
第四節(jié) 大數(shù)據(jù)時代的來臨 42
一、技術(shù)瓶頸的突破或緩解 42
二、海量數(shù)據(jù)的產(chǎn)生 43
小結(jié) 44
第三講 大數(shù)據(jù)的發(fā)展現(xiàn)狀 45
第一節(jié) 大數(shù)據(jù)的發(fā)展歷程 45
第二節(jié) 國外政策 47
一、美國大數(shù)據(jù)政策 47
二、英國大數(shù)據(jù)政策 48
三、法國大數(shù)據(jù)政策 49
四、日本大數(shù)據(jù)政策 50
五、印度大數(shù)據(jù)政策 51
六、澳大利亞大數(shù)據(jù)政策 51
七、韓國大數(shù)據(jù)政策 51
八、其他國際組織的大數(shù)據(jù)政策 52
第三節(jié) 國內(nèi)政策 52
一、國家和行業(yè)政策 52
二、國家大數(shù)據(jù)綜合試驗區(qū) 54
三、地方政策 56
第四節(jié) 大數(shù)據(jù)教育研究動態(tài) 58
一、教育研究機構(gòu) 58
二、教育動態(tài) 59
第五節(jié) 大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展現(xiàn)狀 61
一、大數(shù)據(jù)生態(tài)產(chǎn)業(yè)鏈 61
二、國外大數(shù)據(jù)產(chǎn)業(yè)發(fā)展 63
三、國內(nèi)大數(shù)據(jù)產(chǎn)業(yè)發(fā)展 64
四、產(chǎn)業(yè)聯(lián)盟 66
第六節(jié) 大數(shù)據(jù)發(fā)展趨勢 67
一、大數(shù)據(jù)與實體經(jīng)濟深度融合 67
二、大數(shù)據(jù)與新興技術(shù)協(xié)同發(fā)展 67
三、數(shù)據(jù)治理成為重點發(fā)展領(lǐng)域 68
四、共享經(jīng)濟成為主要發(fā)展方向 68
五、大數(shù)據(jù)安全越發(fā)重要 68
六、大數(shù)據(jù)催生新的工作崗位 68
小結(jié) 69
第四講 大數(shù)據(jù)技術(shù)概況 70
第一節(jié) 數(shù)據(jù)的度量和分類 70
一、數(shù)據(jù)的度量 70
二、數(shù)據(jù)的分類 71
三、數(shù)據(jù)的主要來源 72
第二節(jié) 大數(shù)據(jù)的定義、特征和作用 72
一、數(shù)據(jù)、信息和知識的關(guān)系 72
二、大數(shù)據(jù)的定義 73
三、大數(shù)據(jù)的特征 74
四、大數(shù)據(jù)的理論、技術(shù)和實踐 77
五、大數(shù)據(jù)的重要作用 78
第三節(jié) 大數(shù)據(jù)、物聯(lián)網(wǎng)和云計算的關(guān)系 81
一、物聯(lián)網(wǎng) 81
二、云計算 82
三、大數(shù)據(jù)、物聯(lián)網(wǎng)和云計算三者之間的關(guān)系 82
第四節(jié) 大數(shù)據(jù)參考架構(gòu) 84
一、參考架構(gòu)的解釋說明 85
二、五個主要技術(shù)角色 86
第五節(jié) 大數(shù)據(jù)關(guān)鍵技術(shù) 88
一、大數(shù)據(jù)采集 88
二、大數(shù)據(jù)預(yù)處理 89
三、大數(shù)據(jù)存儲 90
四、大數(shù)據(jù)處理 93
五、大數(shù)據(jù)分析 95
六、大數(shù)據(jù)可視化 100
第六節(jié) 大數(shù)據(jù)技術(shù)生態(tài)圈 102
一、開源陣營 102
二、商業(yè)、半商業(yè)陣營 111
第七節(jié) 大數(shù)據(jù)安全與隱私 114
一、數(shù)據(jù)泄露態(tài)勢 114
二、大數(shù)據(jù)安全法規(guī) 115
三、數(shù)據(jù)安全技術(shù) 116
四、數(shù)據(jù)安全成熟度模型 117
五、大數(shù)據(jù)安全標準 120
小結(jié) 120
第五講 典型案例解析 122
第一節(jié) 結(jié)構(gòu)化數(shù)據(jù)案例:貴陽花果園戶主信息分析 122
第二節(jié) 結(jié)構(gòu)化數(shù)據(jù)案例:貨車幫 123
一、傳統(tǒng)公路物流存在的弊端 124
二、“貨車幫”實現(xiàn)車貨的精準匹配 124
三、“貨車幫”發(fā)展情況 125
第三節(jié) 結(jié)構(gòu)化數(shù)據(jù)案例:百度大遷徙 126
一、人口遷徙的數(shù)據(jù)來源 126
二、“百度大遷徙”地圖的實現(xiàn) 127
三、應(yīng)用價值 127
四、“百度大遷徙”發(fā)展情況 127
第四節(jié) 結(jié)構(gòu)化數(shù)據(jù)案例:保利生活圈 128
一、融合線上與線下 128
二、建立特有的支付方式 130
三、建立免費Wi-Fi網(wǎng)絡(luò) 131
四、組建精準的營銷系統(tǒng) 131
第五節(jié) 結(jié)構(gòu)化數(shù)據(jù)案例:耐克公司的Nike+ 132
一、Nike+的發(fā)展歷程 132
二、Nike+筑牢客戶關(guān)系 134
三、Nike+已融入價值鏈 134
第六節(jié) 非結(jié)構(gòu)化數(shù)據(jù)案例:套牌車查找 135
一、智能視頻分析簡介 136
二、套牌車查找 137
第七節(jié) 非結(jié)構(gòu)化數(shù)據(jù)案例:漢英機器翻譯 142
一、詞對齊 143
二、短語翻譯表 144
三、調(diào)序模型 145
四、語言模型 145
五、譯文生成算法 146
小結(jié) 147
第六講 貴州省大數(shù)據(jù)產(chǎn)業(yè)發(fā)展概況 149
第一節(jié) 發(fā)展優(yōu)勢 149
第二節(jié) 數(shù)博會 151
第三節(jié) 中國數(shù)谷(貴陽、貴安) 154
第四節(jié) 國家大數(shù)據(jù)(貴州)綜合試驗區(qū) 156
一、數(shù)據(jù)資源共享開放形成“聚通用”新模式 157
二、數(shù)據(jù)中心整合利用打造了大數(shù)據(jù)發(fā)展新支撐 158
三、數(shù)據(jù)創(chuàng)新應(yīng)用成為助推高質(zhì)量發(fā)展的新引擎 158
四、大數(shù)據(jù)產(chǎn)業(yè)集聚發(fā)展孕育經(jīng)濟增長新動能 159
五、探索新機制,打通數(shù)據(jù)資源流動新通道 160
六、為大數(shù)據(jù)交流合作搭建國際化新平臺 161
七、推進大數(shù)據(jù)制度創(chuàng)新,開創(chuàng)新機制 161
第五節(jié) 產(chǎn)業(yè)發(fā)展現(xiàn)狀 162
一、貴陽市大數(shù)據(jù)產(chǎn)業(yè)布局 162
二、大數(shù)據(jù)產(chǎn)業(yè)發(fā)展現(xiàn)狀 163
三、代表性大數(shù)據(jù)企業(yè) 163
第六節(jié) 理論和實踐創(chuàng)新 166
一、理論創(chuàng)新 166
二、實踐創(chuàng)新 168
第七節(jié) 數(shù)據(jù)鐵籠 172
一、應(yīng)用場景(酒駕治理流程化) 172
二、完善“制度鐵籠” 173
小結(jié) 174
第七講 大數(shù)據(jù)的其他重要話題 175
第一節(jié) 國家大數(shù)據(jù)政策解讀 175
一、黨中央國務(wù)院高度重視大數(shù)據(jù)發(fā)展 176
二、我國大數(shù)據(jù)政策的特點 176
三、主要大數(shù)據(jù)政策 179
第二節(jié) 大數(shù)據(jù)人才培養(yǎng) 183
一、最新大數(shù)據(jù)職業(yè) 184
二、大數(shù)據(jù)課程體系 184
三、人才培養(yǎng)發(fā)展規(guī)劃 185
第三節(jié) 大數(shù)據(jù)標準化 186
一、大數(shù)據(jù)標準體系框架 187
二、標準化現(xiàn)狀 188
三、大數(shù)據(jù)標準化面臨的問題 192
小結(jié) 193
參考文獻 194