第pan>章緒論

1.pan>研究背景和意義

大數(shù)據(jù)已經(jīng)成為目前各行各業(yè)的熱詞，多源異構(gòu)這一名詞也隨著大數(shù)據(jù)應(yīng)用的深入頻繁出現(xiàn)在各個領(lǐng)域的創(chuàng)新中，時下幾乎成為與創(chuàng)新捆綁的關(guān)鍵要素。多源異構(gòu)大數(shù)據(jù)真正的含義是什么，大數(shù)據(jù)具有什么樣的特性，以及給行業(yè)應(yīng)用創(chuàng)新帶來了哪些機遇，我們又當如何利用大數(shù)據(jù)的價值等問題已經(jīng)擺在我們面前。是隨著數(shù)據(jù)融合的需求和發(fā)展趨勢愈發(fā)顯著，需要很多在傳統(tǒng)應(yīng)用中相對獨立的信息子系統(tǒng)之間的融合，期間面臨數(shù)據(jù)格式多樣性、非結(jié)構(gòu)化數(shù)據(jù)采集、數(shù)據(jù)融合等問題，以及數(shù)據(jù)融合后的應(yīng)用創(chuàng)新等。因年來多源異構(gòu)數(shù)據(jù)融合及利用成為數(shù)據(jù)行業(yè)研究與應(yīng)用的熱點問題。

過去的30年中，信息技術(shù)應(yīng)用從世紀80年代起步，到90年代到2pan>世紀初期的快速發(fā)展，再發(fā)展到如今滲透到了社會的各個角落。在這一發(fā)展過程中，隨著信息設(shè)備和信息應(yīng)用軟件的多樣化，人類社會產(chǎn)生數(shù)據(jù)的方式和數(shù)量均發(fā)生了日新月異的變化。信息技術(shù)發(fā)展起步階段，信息的產(chǎn)生主要依賴人工以及小型業(yè)務(wù)數(shù)據(jù)庫，甚至數(shù)據(jù)庫之間的聯(lián)網(wǎng)共享都很難做到；90年代以后，隨著局域網(wǎng)技術(shù)的成熟，園區(qū)網(wǎng)快速推廣和互聯(lián)網(wǎng)接入技術(shù)的快速變革，加上萬維網(wǎng)技術(shù)了用戶交互的快速發(fā)展，數(shù)據(jù)的累積速度顯著加快，基于業(yè)務(wù)的信息互聯(lián)成為這一時期數(shù)據(jù)產(chǎn)生的主要驅(qū)動力，使信息互聯(lián)的方式得到了極大的改變，10年間，移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)的廣泛應(yīng)用和人工智能技術(shù)、并行計算處理技術(shù)的快速發(fā)展，人類產(chǎn)生數(shù)據(jù)無論是維度、復(fù)雜度還是數(shù)量均有了很大的提高，這既給數(shù)據(jù)處理帶來了挑戰(zhàn)，同時也為數(shù)據(jù)的深度融合與應(yīng)用帶來了的機遇。

大數(shù)據(jù)處理和分析技術(shù)隨之成為信息技術(shù)領(lǐng)域的研究熱點，以云計算為代表的海量異構(gòu)數(shù)據(jù)處理技術(shù)得到了快速發(fā)展，數(shù)據(jù)處理能力的給數(shù)據(jù)端系統(tǒng)的應(yīng)用創(chuàng)新提供了更大的空間，并且隨著研究的深入，技術(shù)步又反過來帶來了新的數(shù)據(jù)產(chǎn)生方式和驅(qū)動力。例如以智能手機代表的移動互聯(lián)網(wǎng)，應(yīng)用的深入發(fā)展一方面催生了應(yīng)用的創(chuàng)新，出現(xiàn)了大量的以電子商務(wù)、社交、支付、垂直領(lǐng)域創(chuàng)新為代表的新應(yīng)用，而與此同時應(yīng)用創(chuàng)新也在反過來推動信息采集和數(shù)據(jù)分析需求的快速發(fā)展，是在電商、支付、興趣點等領(lǐng)域，在移動互聯(lián)網(wǎng)的支持下，信息的透明度在不斷加強，深層次的商業(yè)價值和更加人性化的服務(wù)挖掘已經(jīng)成為可能；再例如LBS應(yīng)用從起初的位置搜索、導(dǎo)航應(yīng)用逐步向商業(yè)信息推送與精準營銷、社交網(wǎng)絡(luò)等很多領(lǐng)域滲透，隨之帶來的就是純位置數(shù)據(jù)已經(jīng)無法滿足LBS應(yīng)一步發(fā)展的需要，而是需要融合更多種類的用戶數(shù)據(jù)才能達到更高的分析度，從而發(fā)掘其中的應(yīng)用和商業(yè)價值。

可見，在大數(shù)據(jù)條件下實現(xiàn)數(shù)據(jù)分析與挖掘，推動應(yīng)用向更深層次發(fā)展，其研究的關(guān)注點已經(jīng)從傳統(tǒng)的強關(guān)聯(lián)數(shù)據(jù)逐步向更多數(shù)據(jù)源及其產(chǎn)生的弱關(guān)聯(lián)數(shù)據(jù)拓展。更重要的是，基于移動互聯(lián)和物聯(lián)網(wǎng)技術(shù)采集的網(wǎng)絡(luò)用戶數(shù)據(jù)，具有相當高的客觀度，能夠基于這些數(shù)據(jù)實現(xiàn)用戶特征更加客觀的刻畫，這一點為未來大數(shù)據(jù)的深度應(yīng)用帶來了巨大的發(fā)展空間。多源異構(gòu)數(shù)據(jù)在全、生物、等領(lǐng)域已經(jīng)有了初步應(yīng)用，證明了多源異構(gòu)數(shù)據(jù)融合對于提高推演結(jié)論的度的有效性。在經(jīng)濟金融領(lǐng)域，隨著金融信息科技的快速發(fā)展，充分利用金融大數(shù)據(jù)開展金融應(yīng)用創(chuàng)新成為金融行業(yè)未來的發(fā)展突破口，例如傳統(tǒng)商業(yè)銀行除了紛紛推出網(wǎng)上銀行之外，在網(wǎng)店業(yè)務(wù)創(chuàng)新、創(chuàng)新理財產(chǎn)品、營銷、對公業(yè)務(wù)、產(chǎn)品營銷等很多方行了創(chuàng)新，這些創(chuàng)新均有大數(shù)據(jù)技術(shù)和人工智能在背后的支持幾年得到快速發(fā)展的互聯(lián)網(wǎng)金融更是金融和信息深度融合的發(fā)展成果，隨期互聯(lián)網(wǎng)金融發(fā)展從粗放增長向理性的轉(zhuǎn)變，創(chuàng)新產(chǎn)品開發(fā)和風險控制成為互聯(lián)網(wǎng)金融向更深層次發(fā)展的必由之路；此外，工業(yè)界出現(xiàn)了工業(yè)4.0、工業(yè)互聯(lián)網(wǎng)、智能制造、管控一體化、人機一體化等各種基于大數(shù)據(jù)、互聯(lián)技術(shù)的變革概念，已經(jīng)在工業(yè)生產(chǎn)領(lǐng)域產(chǎn)生了顯著的作用，我國也在的下在多家制造企業(yè)實施了智能制造試點項目。