數(shù)學(xué)與統(tǒng)計(jì)學(xué)院

數(shù)據(jù)科學(xué)方向介紹之二----- 大數(shù)據(jù)時(shí)代的10大變革
2018-06-22 11:12:22 來源: 瀏覽:
   大數(shù)據(jù)時(shí)代的到來正在改變?nèi)藗兊纳罘绞健⑺季S模式和研究范式,我們可以總結(jié)出10個(gè)重大變革,如圖1所示。

                                                                                    圖1大數(shù)據(jù)時(shí)代的10大變化
 
    1. 對(duì)研究范式的新認(rèn)識(shí)——從“第三范式”到“第四范式”。
   2007年,圖靈獎(jiǎng)獲得者Jim Gray提出了科學(xué)研究的第四范式——數(shù)據(jù)密集型科學(xué)發(fā)現(xiàn)(Data-intensive ScientificDiscovery)。在他看來,人類科學(xué)研究活動(dòng)已經(jīng)歷過三中不同范式的演變過程(原始社會(huì)的“實(shí)驗(yàn)科學(xué)范式”、以模型和歸納為特征的“理論科學(xué)范式”和以模擬仿真為特征的“計(jì)算科學(xué)范式”),目前正在從“計(jì)算科學(xué)范式”轉(zhuǎn)向“數(shù)據(jù)密集型科學(xué)發(fā)現(xiàn)范式”。
   第四范式,即“數(shù)據(jù)密集型科學(xué)發(fā)現(xiàn)范式”的主要特點(diǎn)是科學(xué)研究人員只需要從大數(shù)據(jù)中查找和挖掘所需要的信息和知識(shí),無須直接面對(duì)所研究的物理對(duì)象。例如,在大數(shù)據(jù)時(shí)代,天文學(xué)家的研究方式發(fā)生了新的變化——其主要研究任務(wù)變?yōu)閺暮A繑?shù)據(jù)庫(kù)中發(fā)現(xiàn)所需的物體或現(xiàn)象的照片,而不再需要親自進(jìn)行太空拍照。再如,本書作者在一次研究生科學(xué)研究方法的調(diào)研中發(fā)現(xiàn),絕大部分同學(xué)的研究范式有待調(diào)整——他們往往習(xí)慣性地“采用問卷調(diào)查法等方法親自收集新數(shù)據(jù)”,而不是“首先想到有沒有現(xiàn)成的大數(shù)據(jù)以及如何再利用已有的數(shù)據(jù)(數(shù)據(jù)洞見)”,如圖1所示。

                                                        圖2  某學(xué)生的科學(xué)研究思維分析
 
   2. 對(duì)數(shù)據(jù)的新認(rèn)識(shí)——從“數(shù)據(jù)資源”到“數(shù)據(jù)資產(chǎn)”。
在大數(shù)據(jù)時(shí)代,數(shù)據(jù)不僅是一種“資源”,而更是一種重要的“資產(chǎn)”。因此,數(shù)據(jù)科學(xué)應(yīng)把數(shù)據(jù)當(dāng)做“一種資產(chǎn)來管理”,而不能僅僅當(dāng)做“資源”來對(duì)待。也就是說,與其他類型的資產(chǎn)相似,數(shù)據(jù)也具有財(cái)務(wù)價(jià)值,且需要作為獨(dú)立實(shí)體進(jìn)行組織與管理。
   3.對(duì)方法論的新認(rèn)識(shí)——從“基于知識(shí)解決問題”到“基于數(shù)據(jù)解決問題”。我們傳統(tǒng)的方法論往往是“基于知識(shí)”的,即從“大量實(shí)踐(數(shù)據(jù))”中總結(jié)和提煉出一般性知識(shí)(定理、模式、模型、函數(shù)等)之后,用知識(shí)去解決(或解釋)問題。因此,傳統(tǒng)的問題解決思路是“問題→知識(shí)→問題”,即根據(jù)問題找“知識(shí)”,并用“知識(shí)”解決“問題”。然而,數(shù)據(jù)科學(xué)中興起了另一種方法論——“問題→數(shù)據(jù)→問題”,即根據(jù)問題找“數(shù)據(jù)”,并直接用數(shù)據(jù)(不需要把“數(shù)據(jù)”轉(zhuǎn)換成“知識(shí)”的前提下)解決問題,如圖3所示。

                                                                            圖3   傳統(tǒng)思維與大數(shù)據(jù)思維的比較
 
   4.對(duì)數(shù)據(jù)分析的新認(rèn)識(shí)——從統(tǒng)計(jì)學(xué)到數(shù)據(jù)科學(xué)。在傳統(tǒng)科學(xué)中,數(shù)據(jù)分析主要以數(shù)學(xué)和統(tǒng)計(jì)學(xué)為直接理論工具。但是,云計(jì)算等計(jì)算模式的出現(xiàn)以及大數(shù)據(jù)時(shí)代的到來,提升了我們對(duì)數(shù)據(jù)的獲取、存儲(chǔ)、計(jì)算與管理能力,進(jìn)而對(duì)統(tǒng)計(jì)學(xué)理論與方法產(chǎn)生了深遠(yuǎn)影響,主要有:
隨著數(shù)據(jù)獲取、存儲(chǔ)與計(jì)算能力的提升,我們可以很容易獲得統(tǒng)計(jì)學(xué)中所指的“總體”中的全部數(shù)據(jù),且可以在總體上直接進(jìn)行計(jì)算——不再需要進(jìn)行“抽樣操作”;
在海量、動(dòng)態(tài)、異構(gòu)數(shù)據(jù)環(huán)境中,人們更加關(guān)注的是數(shù)據(jù)計(jì)算的“效率”而不再盲目追求其“精準(zhǔn)度”。例如,在數(shù)據(jù)科學(xué)中,廣泛應(yīng)用“基于數(shù)據(jù)的”思維模式,重視對(duì)“相關(guān)性”的分析,而不是等到發(fā)現(xiàn)“真正的因果關(guān)系”之后才解決問題。在大數(shù)據(jù)時(shí)代,人們開始重視相關(guān)分析,而不僅僅是因果分析。
   5.對(duì)計(jì)算智能的新認(rèn)識(shí)——從復(fù)雜算法到簡(jiǎn)單算法。“只要擁有足夠多的數(shù)據(jù),我們可以變得更聰明”是大數(shù)據(jù)時(shí)代的一個(gè)新認(rèn)識(shí)。因此,在大數(shù)據(jù)時(shí)代,原本復(fù)雜的“智能問題”變成簡(jiǎn)單的“數(shù)據(jù)問題”——只要對(duì)大數(shù)據(jù)的進(jìn)行簡(jiǎn)單查詢就可以達(dá)到“基于復(fù)雜算法的智能計(jì)算的效果”。為此,很多學(xué)者曾討論過一個(gè)重要話題——“大數(shù)據(jù)時(shí)代需要的是更多數(shù)據(jù)還是更好的模型(moredata or better model)?”。機(jī)器翻譯是傳統(tǒng)自然語(yǔ)言技術(shù)領(lǐng)域的難點(diǎn),雖曾提出過很多種“算法”,但應(yīng)用效果并不理想。近年來,Google翻譯等工具改變了“實(shí)現(xiàn)策略”,不再僅靠復(fù)雜算法進(jìn)行翻譯,而對(duì)他們之前收集的跨語(yǔ)言語(yǔ)料庫(kù)進(jìn)行簡(jiǎn)單查詢的方式,提升了機(jī)器翻譯的效果和效率。
   6.對(duì)數(shù)據(jù)管理側(cè)重點(diǎn)的新認(rèn)識(shí)——從業(yè)務(wù)數(shù)據(jù)化到數(shù)據(jù)業(yè)務(wù)化。在大數(shù)據(jù)時(shí)代,企業(yè)需要重視一個(gè)新的課題——數(shù)據(jù)業(yè)務(wù)化,即如何“基于數(shù)據(jù)”動(dòng)態(tài)地定義、優(yōu)化和重組業(yè)務(wù)及其流程,進(jìn)而提升業(yè)務(wù)的敏捷性,降低風(fēng)險(xiǎn)和成本。但是,在傳統(tǒng)數(shù)據(jù)管理中我們更加關(guān)注的是業(yè)務(wù)的數(shù)據(jù)化問題,即如何將業(yè)務(wù)活動(dòng)以數(shù)據(jù)方式記錄下來,以便進(jìn)行業(yè)務(wù)審計(jì)、分析與挖掘。可見,業(yè)務(wù)數(shù)據(jù)化是前提,而數(shù)據(jù)業(yè)務(wù)化是目標(biāo)。
   7.對(duì)決策方式的新認(rèn)識(shí)——從目標(biāo)驅(qū)動(dòng)型決策到數(shù)據(jù)驅(qū)動(dòng)型決策。傳統(tǒng)科學(xué)思維中,決策制定往往是“目標(biāo)”或“模型”驅(qū)動(dòng)的——根據(jù)目標(biāo)(或模型)進(jìn)行決策。然而,大數(shù)據(jù)時(shí)代出現(xiàn)了另一種思維模式,即數(shù)據(jù)驅(qū)動(dòng)型決策,數(shù)據(jù)成為決策制定的主要“觸發(fā)條件”和“重要依據(jù)”。例如,近年來,很多高新企業(yè)中的部門和崗位設(shè)置不再是“固化的”,而是根據(jù)所做項(xiàng)目與所處的數(shù)據(jù)環(huán)境,隨時(shí)動(dòng)態(tài)調(diào)整其部門和崗位設(shè)置。然而,部門和崗位設(shè)置的敏捷性往往是基于數(shù)據(jù)驅(qū)動(dòng)的,根據(jù)數(shù)據(jù)分析的結(jié)果靈活調(diào)整企業(yè)內(nèi)部結(jié)構(gòu)。
   8.對(duì)產(chǎn)業(yè)競(jìng)合關(guān)系的新認(rèn)識(shí)——從“以戰(zhàn)略為中心競(jìng)合關(guān)系”到“以數(shù)據(jù)為中心競(jìng)合關(guān)系”。在大數(shù)據(jù)時(shí)代,企業(yè)之間的競(jìng)合關(guān)系發(fā)生了變化,原本相互激烈競(jìng)爭(zhēng),甚至不愿合作的企業(yè),不得不開始合作,形成新的業(yè)態(tài)和產(chǎn)業(yè)鏈。例如,近年來IBM公司和Apple公司“化敵為友”,并有報(bào)道稱他們正在從競(jìng)爭(zhēng)對(duì)手轉(zhuǎn)向合作伙伴——IBM的100多名員工前往Apple的加州庫(kù)比蒂諾總部,與Apple一起為IBM的客戶(例如花旗、Sprint和日本郵政)聯(lián)合開發(fā)iPhone和iPad應(yīng)用。
   9.對(duì)數(shù)據(jù)復(fù)雜性的新認(rèn)識(shí)——從不接受到接受數(shù)據(jù)的復(fù)雜性。在傳統(tǒng)科學(xué)看來,數(shù)據(jù)需要徹底“凈化”和“集成”,計(jì)算目的是需要找出“精確答案”,而其背后的哲學(xué)是“不接受數(shù)據(jù)的復(fù)雜性”。然而,大數(shù)據(jù)中更加強(qiáng)調(diào)的是數(shù)據(jù)的動(dòng)態(tài)性、異構(gòu)性和跨域等復(fù)雜性——彈性計(jì)算、魯棒性、虛擬化和快速響應(yīng),開始把“復(fù)雜性”當(dāng)作數(shù)據(jù)的一個(gè)固有特征來對(duì)待,組織數(shù)據(jù)生態(tài)系統(tǒng)的管理目標(biāo)轉(zhuǎn)向?qū)⒔M織處于混沌邊緣狀態(tài)。
   10.對(duì)數(shù)據(jù)處理模式的新認(rèn)識(shí)——從“小眾參與”到“大眾協(xié)同”。傳統(tǒng)科學(xué)中,數(shù)據(jù)的分析和挖掘都是具有很高專業(yè)素養(yǎng)的“企業(yè)核心員工”的事情,企業(yè)管理的重要目的是如何激勵(lì)和績(jī)效考核這些“核心員工”。但是,在大數(shù)據(jù)時(shí)代,基于“核心員工”的創(chuàng)新工作成本和風(fēng)險(xiǎn)越來越大,而基于“專家余(Pro-Am)”的大規(guī)模協(xié)作日益受到重視,正成為解決數(shù)據(jù)規(guī)模與形式化之間矛盾的重要手段。
 
     全文鏈接:http://toutiao.com/i6309757259060609538/
】【打印關(guān)閉
上一篇數(shù)據(jù)科學(xué)方向介紹之一-----今年高考志愿,選個(gè)好專業(yè)比選個(gè)好學(xué)校更重要! 下一篇數(shù)據(jù)科學(xué)方向介紹之三-----大數(shù)據(jù)高端人才是怎樣煉成的?

最新內(nèi)容

熱門內(nèi)容

灵丘县| 集贤县| 四川省| 苗栗县| 元阳县| 利川市| 泰兴市| 渭南市| 邵阳县| 榆社县| 永安市| 美姑县| 双鸭山市| 屯留县| 卢氏县| 石嘴山市| 永安市| 武夷山市| 思南县| 平谷区| 盘山县| 东至县| 济南市| 隆安县| 西昌市| 自贡市| 邹城市| 乐业县| 龙州县| 南召县| 广德县| 清水河县| 休宁县| 建宁县| 陈巴尔虎旗| 威海市| 张家港市| 满城县| 武乡县| 申扎县| 湘阴县|