大數(shù)據(jù)正如浪潮一般席卷全世界，不僅在信息技術(shù)行業(yè)備受矚目，更成為變革科研、商業(yè)、政府運(yùn)作方式乃至人類思維方式的一個(gè)熱點(diǎn)。大數(shù)據(jù)時(shí)代發(fā)展趨勢(shì)的特點(diǎn)可以概況為兩個(gè)詞：融合、跨界，體現(xiàn)在學(xué)科、技術(shù)、系統(tǒng)和應(yīng)用方面的融合，以及在不同學(xué)科、不同行業(yè)的跨界

人類社會(huì)的信息化進(jìn)程其實(shí)可以劃分為三個(gè)時(shí)代，即計(jì)算機(jī)時(shí)代、互聯(lián)網(wǎng)時(shí)代和大數(shù)據(jù)時(shí)代。

到20世紀(jì)90年代中期，發(fā)達(dá)國(guó)家已經(jīng)基本度過了計(jì)算機(jī)時(shí)代。計(jì)算機(jī)的普及，解決了信息的機(jī)器可讀化和數(shù)據(jù)的可計(jì)算化問題。目前，發(fā)達(dá)國(guó)家和部分發(fā)展中國(guó)家也基本走完了互聯(lián)網(wǎng)時(shí)代的路程。互聯(lián)網(wǎng)的建立解決了信息傳遞和信息服務(wù)問題，而移動(dòng)互聯(lián)網(wǎng)的發(fā)展更是將互聯(lián)網(wǎng)時(shí)代帶入了發(fā)展的高潮。在計(jì)算機(jī)和互聯(lián)網(wǎng)的基礎(chǔ)上，而今我們正步入一個(gè)全新的歷史階段—大數(shù)據(jù)時(shí)代。

劍橋大學(xué)教授維克托?邁爾–舍恩伯格在其《大數(shù)據(jù)時(shí)代：生活、工作與思維的大變革》中寫道：“大數(shù)據(jù)開啟了一次重大的時(shí)代轉(zhuǎn)型。就像望遠(yuǎn)鏡讓我們感受宇宙、顯微鏡讓我們能夠觀測(cè)微生物一樣，大數(shù)據(jù)正在改變我們的生活以及理解世界的方式，成為新發(fā)明和新服務(wù)的源泉，而更多的改變正蓄勢(shì)待發(fā)……未來(lái)數(shù)據(jù)將會(huì)像土地、石油和資本一樣，成為經(jīng)濟(jì)運(yùn)行中的根本性資源?！?/span>

大數(shù)據(jù)正如浪潮一般席卷全世界，不僅在信息技術(shù)行業(yè)備受矚目，更成為變革科研、商業(yè)、政府運(yùn)作方式乃至人類思維方式的一個(gè)熱點(diǎn)。

《中國(guó)大數(shù)據(jù)技術(shù)與產(chǎn)業(yè)發(fā)展白皮書(2014年)》針對(duì)大數(shù)據(jù)的發(fā)展做出了以下預(yù)測(cè)：

一、結(jié)合智能計(jì)算的大數(shù)據(jù)分析成為熱點(diǎn)

大數(shù)據(jù)與神經(jīng)計(jì)算、深度學(xué)習(xí)、語(yǔ)義計(jì)算以及人工智能其他相關(guān)技術(shù)結(jié)合，成為大數(shù)據(jù)分析領(lǐng)域的熱點(diǎn)。大數(shù)據(jù)分析的核心是從數(shù)據(jù)中獲取價(jià)值，價(jià)值體現(xiàn)在從大數(shù)據(jù)中獲取更準(zhǔn)確、更深層次的知識(shí)，而非對(duì)數(shù)據(jù)的簡(jiǎn)單統(tǒng)計(jì)分析。要達(dá)到這一目標(biāo)，需要提升對(duì)數(shù)據(jù)的認(rèn)知計(jì)算能力，讓計(jì)算系統(tǒng)具備對(duì)數(shù)據(jù)的理解、推理、發(fā)現(xiàn)和決策能力，其背后的核心技術(shù)就是人工智能。近年來(lái)，人工智能的研究和應(yīng)用又掀起新高潮，這一方面得益于計(jì)算機(jī)硬件性能的突破，另一方面則依靠以云計(jì)算、大數(shù)據(jù)為代表的計(jì)算技術(shù)的快速發(fā)展，使得信息處理速度和質(zhì)量大為提高，能夠快速、并行處理海量數(shù)據(jù)。

二、數(shù)據(jù)科學(xué)帶動(dòng)多學(xué)科融合發(fā)展

在大數(shù)據(jù)時(shí)代，許多學(xué)科表面上看來(lái)研究的方向大不相同，但是從數(shù)據(jù)的視角來(lái)看，其內(nèi)在是相通的。隨著社會(huì)的數(shù)字化程度逐步加深，越來(lái)越來(lái)多的學(xué)科在數(shù)據(jù)層面趨于一致?？梢圆捎孟嗨频乃枷雭?lái)進(jìn)行統(tǒng)一的研究。數(shù)據(jù)科學(xué)作為一個(gè)與大數(shù)據(jù)相關(guān)的新興學(xué)科出現(xiàn)，可促進(jìn)多學(xué)科的交叉融合發(fā)展。

三、與行業(yè)數(shù)據(jù)結(jié)合，實(shí)現(xiàn)跨領(lǐng)域應(yīng)用

大數(shù)據(jù)技術(shù)發(fā)展的目標(biāo)是應(yīng)用落地，因此大數(shù)據(jù)研究不能僅僅局限于計(jì)算技術(shù)本身。由于現(xiàn)有的大數(shù)據(jù)平臺(tái)易用性差，而垂直應(yīng)用行業(yè)的數(shù)據(jù)分析又涉及到領(lǐng)域?qū)＜抑R(shí)和領(lǐng)域建模，目前在大數(shù)據(jù)行業(yè)分析應(yīng)用與通用的大數(shù)據(jù)技術(shù)之間存在很大的鴻溝，缺少相互的交叉融合。因此，迫切需要進(jìn)行跨學(xué)科和跨領(lǐng)域的大數(shù)據(jù)技術(shù)和應(yīng)用研究，促進(jìn)和推動(dòng)大數(shù)據(jù)在典型和重大行業(yè)中的應(yīng)用和落地?？珙I(lǐng)域交叉的數(shù)據(jù)融合分析與應(yīng)用將成為今后大數(shù)據(jù)行業(yè)應(yīng)用發(fā)展的重大趨勢(shì)。

四、與“物云移社”融合，產(chǎn)生綜合價(jià)值

大數(shù)據(jù)將與物聯(lián)網(wǎng)、移動(dòng)互聯(lián)、云計(jì)算、社會(huì)計(jì)算等熱點(diǎn)技術(shù)領(lǐng)域相互交叉融合，產(chǎn)生很多綜合性應(yīng)用。近年來(lái)計(jì)算機(jī)和信息技術(shù)發(fā)展的趨勢(shì)是，前端更前伸，后端更強(qiáng)大。物聯(lián)網(wǎng)與移動(dòng)計(jì)算加強(qiáng)了物理世界人與物的連接和融合，大數(shù)據(jù)和云計(jì)算加強(qiáng)了后端的數(shù)據(jù)存儲(chǔ)管理和計(jì)算能力。今后，這幾個(gè)熱點(diǎn)技術(shù)領(lǐng)域?qū)⑾嗷ソ徊嫒诤?，產(chǎn)生很多綜合性應(yīng)用。

五、大數(shù)據(jù)多樣化處理模式與軟硬件基礎(chǔ)設(shè)施逐步夯實(shí)

內(nèi)存計(jì)算將繼續(xù)成為提高大數(shù)據(jù)處理性能的主要手段。以Spark 為代表的內(nèi)存計(jì)算逐步走向商用，并與Hadoop 融合共存。專為大數(shù)據(jù)處理優(yōu)化的系統(tǒng)和硬件出現(xiàn)。由于大數(shù)據(jù)系統(tǒng)在計(jì)算、存儲(chǔ)、高速緩存方面的需求不平衡，傳統(tǒng)服務(wù)器與存儲(chǔ)已經(jīng)不適合構(gòu)建高可靠和高性價(jià)比的大數(shù)據(jù)處理系統(tǒng)。大數(shù)據(jù)處理多樣化模式并存融合，一體化融合的大數(shù)據(jù)處理平臺(tái)逐漸成為趨勢(shì)。

六、大數(shù)據(jù)安全和隱私繼續(xù)受關(guān)注

大數(shù)據(jù)安全和隱私問題始終是關(guān)注的熱點(diǎn)，但是在大數(shù)據(jù)的安全和隱私保護(hù)方面，以及大數(shù)據(jù)涉及到資源國(guó)家主權(quán)這層面，從技術(shù)層面來(lái)看尚未取得較大的進(jìn)步，仍存在很多問題，因此大數(shù)據(jù)的安全持續(xù)令人擔(dān)憂。

七、大數(shù)據(jù)技術(shù)課程體系建設(shè)和人才培養(yǎng)亟待推進(jìn)

大數(shù)據(jù)技術(shù)的快速發(fā)展和行業(yè)應(yīng)用需求的快速增長(zhǎng)，使得目前技術(shù)市場(chǎng)上掌握大數(shù)據(jù)技術(shù)的人才嚴(yán)重短缺。因此，政府、高等院校和科研院所將加快建立大數(shù)據(jù)技術(shù)人才教育和培養(yǎng)體系，發(fā)展數(shù)據(jù)科學(xué)和工程專業(yè)，梳理和構(gòu)建跨學(xué)科和領(lǐng)域交叉的大數(shù)據(jù)課程體系，融合計(jì)算機(jī)、數(shù)學(xué)分析統(tǒng)計(jì)、應(yīng)用相關(guān)的學(xué)科，推動(dòng)交叉學(xué)科數(shù)據(jù)分析技術(shù)的發(fā)展以及人才的培養(yǎng)。

八、開源大數(shù)據(jù)處理技術(shù)和各種可視化技術(shù)和工具將蓬勃發(fā)展

以Hadoop為代表的開源技術(shù)拉開了大數(shù)據(jù)技術(shù)的序幕，大數(shù)據(jù)應(yīng)用的發(fā)展又促進(jìn)了開源技術(shù)的進(jìn)一步發(fā)展。開源技術(shù)的發(fā)展降低了數(shù)據(jù)處理的成本，引領(lǐng)了大數(shù)據(jù)生態(tài)系統(tǒng)的蓬勃發(fā)展，同時(shí)也給傳統(tǒng)數(shù)據(jù)庫(kù)廠商帶來(lái)了挑戰(zhàn)。據(jù)統(tǒng)計(jì)，目前有超過150 種開源大數(shù)據(jù)平臺(tái)，這個(gè)數(shù)字還在增長(zhǎng)中。此外，由于在進(jìn)行大數(shù)據(jù)分析之前，需要對(duì)數(shù)據(jù)進(jìn)行探索式地考察，在分析之后，也需要將分析結(jié)果展示出來(lái)。在此過程中，可視化將發(fā)揮很大的作用?？梢暬夹g(shù)和工具將得到蓬勃發(fā)展。

綜上，大數(shù)據(jù)時(shí)代的發(fā)展趨勢(shì)其特點(diǎn)可以概況為兩個(gè)詞：融合、跨界，體現(xiàn)在學(xué)科、技術(shù)、系統(tǒng)和應(yīng)用方面的融合，以及在不同學(xué)科、不同行業(yè)的跨界。大數(shù)據(jù)必將能夠創(chuàng)造新的價(jià)值，正如《大數(shù)據(jù)：正在到來(lái)的數(shù)據(jù)革命》的作者涂子沛指出，大數(shù)據(jù)能夠通過數(shù)據(jù)的交換、整合和分析，發(fā)現(xiàn)新知識(shí)，創(chuàng)造新價(jià)值，帶來(lái)大知識(shí)、大科技、大利潤(rùn)和大發(fā)展。

編者注：本文主要部分摘自《中國(guó)大數(shù)據(jù)技術(shù)與產(chǎn)業(yè)發(fā)展白皮書(2014)年》