大數(shù)據(jù)已經(jīng)成為整個(gè)社會(huì)的底層架構(gòu)和標(biāo)配，其上的一切都必須按照大數(shù)據(jù)的要求進(jìn)行重構(gòu)，大數(shù)據(jù)在解決大問(wèn)題方面尤為有效，目前在語(yǔ)音搜索、智慧城市建設(shè)、互聯(lián)網(wǎng)金融治理等方面取得了長(zhǎng)足的進(jìn)展，未來(lái)更多的領(lǐng)域都必將被大數(shù)據(jù)所革命和重構(gòu)。
1989年，當(dāng)萬(wàn)維網(wǎng)出現(xiàn)之后，給我們帶來(lái)了第四次傳播革命，互聯(lián)網(wǎng)以其海量的空間、互動(dòng)的方式，使得信息數(shù)量急劇增加，根據(jù)ZDNET的數(shù)據(jù)顯示，2013年中國(guó)產(chǎn)生的數(shù)據(jù)總量超過(guò)0．8ZB，2倍于2012年，相當(dāng)于2009年全球的數(shù)據(jù)總量，而預(yù)計(jì)到2020年，中國(guó)產(chǎn)生的數(shù)據(jù)總量將達(dá)到16ZB。尤其在“摩爾定律”使得存儲(chǔ)能力極速提升、社交媒體的出現(xiàn)使得生產(chǎn)數(shù)據(jù)的能力高速發(fā)展、新數(shù)據(jù)挖掘技術(shù)使得數(shù)據(jù)分析能力大大擴(kuò)展三大動(dòng)力的推動(dòng)下，全世界進(jìn)入了大數(shù)據(jù)時(shí)代，2013年也被稱為大數(shù)據(jù)元年，意味著大數(shù)據(jù)開(kāi)始進(jìn)入商用階段。在大數(shù)據(jù)時(shí)代，DT＋將成為大勢(shì)所趨。
大數(shù)據(jù)及其本質(zhì)特征
大數(shù)據(jù)是指以服務(wù)于決策為目的，需要新型數(shù)據(jù)處理模式才能對(duì)其內(nèi)容進(jìn)行采集、存儲(chǔ)、管理和分析的海量、高增長(zhǎng)率和多樣化的信息資本。
大數(shù)據(jù)具有如下本質(zhì)特征：一是根本目的是服務(wù)于決策，大數(shù)據(jù)能夠幫助各類組織和個(gè)人大幅度提升決策能力，做出更好的決策和判斷。二是量度大，大數(shù)據(jù)通常是指100T以上的數(shù)據(jù)量，這難以依靠傳統(tǒng)的計(jì)算手段有效計(jì)算，而必須依靠新的計(jì)算手段和數(shù)據(jù)挖掘工具。三是頻率高，大數(shù)據(jù)是用戶參與互動(dòng)而產(chǎn)生的數(shù)據(jù)，根據(jù)用戶的網(wǎng)絡(luò)痕跡來(lái)及時(shí)地了解用戶的相關(guān)數(shù)據(jù)，這種數(shù)據(jù)是按照天甚至小時(shí)來(lái)計(jì)算的高頻數(shù)據(jù)。而傳統(tǒng)的數(shù)據(jù)頻率都很低，很多數(shù)據(jù)是按照月甚至按照年份來(lái)計(jì)算的。四是速度快，大數(shù)據(jù)是實(shí)時(shí)性的數(shù)據(jù)，能夠?qū)崟r(shí)反應(yīng)。例如，在百度搜索框輸入一個(gè)關(guān)鍵詞，能夠瞬間呈現(xiàn)，而傳統(tǒng)的數(shù)據(jù)收集方式則是嚴(yán)重滯后的。五是維度豐富多樣，大數(shù)據(jù)是全樣本數(shù)據(jù)、多維度數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)，既包括普通的結(jié)構(gòu)化數(shù)據(jù)，又包括視頻和音頻等非結(jié)構(gòu)化數(shù)據(jù)。正是因?yàn)榇髷?shù)據(jù)的維度多樣性，其也更為復(fù)雜。六是永遠(yuǎn)在線。在線是大數(shù)據(jù)的前提條件，從這個(gè)角度來(lái)說(shuō)，大數(shù)據(jù)是永遠(yuǎn)在線的，能夠隨時(shí)被調(diào)用的。大數(shù)據(jù)通過(guò)分析各種網(wǎng)絡(luò)終端上的用戶痕跡，能夠更好地分析用戶的行為、情感、思想、愛(ài)好與需求，來(lái)更好地進(jìn)行決策和分析。七是本質(zhì)是信息資本。大數(shù)據(jù)是能夠?yàn)檎推髽I(yè)帶來(lái)未來(lái)經(jīng)濟(jì)利益的信息資源，其本質(zhì)是信息資產(chǎn)，而且隨著大數(shù)據(jù)的應(yīng)用越來(lái)越廣，其價(jià)值會(huì)越來(lái)越大。因此，不應(yīng)該僅僅把大數(shù)據(jù)看成成本，而應(yīng)把其看成和土地、資本、人才等一樣的新生產(chǎn)要素。
政府?dāng)?shù)據(jù)公開(kāi)是大數(shù)據(jù)發(fā)展的保障
大數(shù)據(jù)的重要組成部分是政府?dāng)?shù)據(jù)，因此政府?dāng)?shù)據(jù)公開(kāi)的程度和廣度將在很大程度上決定著大數(shù)據(jù)的發(fā)展水平。目前，美國(guó)等西方發(fā)達(dá)國(guó)家大力推進(jìn)數(shù)據(jù)開(kāi)放運(yùn)動(dòng)，在數(shù)據(jù)公開(kāi)程度上居于世界前列。2011年9月20日，美國(guó)、巴西、印度尼西亞、墨西哥、挪威、菲律賓、南非、英國(guó)等八個(gè)國(guó)家（G8）聯(lián)合簽署了《開(kāi)放數(shù)據(jù)聲明》，在紐約發(fā)起“開(kāi)放政府聯(lián)盟”（OGP），以向本國(guó)社會(huì)開(kāi)放更多的信息。2013年6月，八國(guó)集團(tuán)首腦簽署了《開(kāi)放數(shù)據(jù)憲章》，制定開(kāi)放數(shù)據(jù)行動(dòng)方案，并設(shè)定了開(kāi)放數(shù)據(jù)憲章的五大原則：開(kāi)放數(shù)據(jù)為默認(rèn)；為激勵(lì)創(chuàng)新發(fā)布數(shù)據(jù)；為改善治理發(fā)布數(shù)據(jù)；注重?cái)?shù)量和質(zhì)量；讓所有人可用。尤其需要指出的是，其中最重要的一條就是“開(kāi)放為默認(rèn)，不開(kāi)放為特例”的原則，這就約束政府部門盡大可能地公開(kāi)所有數(shù)據(jù)，而反觀我國(guó)，由于政府?dāng)?shù)據(jù)開(kāi)放的程度很低，各部門基于自身的利益，基本上采取的是“開(kāi)放為特例，不開(kāi)放為默認(rèn)”的原則，這也導(dǎo)致形成一個(gè)個(gè)的“信息孤島”。
2007年，國(guó)務(wù)院通過(guò)了《中華人民共和國(guó)政府信息公開(kāi)條例》，國(guó)務(wù)院辦公廳印發(fā)的《2015年政府信息公開(kāi)工作要點(diǎn)》更加明確地強(qiáng)調(diào)推進(jìn)行政權(quán)力清單、財(cái)政資金、公共服務(wù)、國(guó)有企業(yè)、環(huán)境保護(hù)等九大領(lǐng)域的信息公開(kāi)工作。2015年8月19日，國(guó)務(wù)院總理李克強(qiáng)主持召開(kāi)國(guó)務(wù)院常務(wù)會(huì)議，通過(guò)《關(guān)于促進(jìn)大數(shù)據(jù)發(fā)展的行動(dòng)綱要》。目前，我國(guó)的政府?dāng)?shù)據(jù)開(kāi)放存在著四大挑戰(zhàn)：一是開(kāi)放與安全，在實(shí)踐中，很多人以數(shù)據(jù)安全為由來(lái)反對(duì)數(shù)據(jù)開(kāi)放，這是一種很片面的觀點(diǎn)；二是人才和文化，我國(guó)的數(shù)據(jù)人才在量和質(zhì)上都存在重大缺陷，而且也沒(méi)有形成“數(shù)據(jù)文化”；三是政策標(biāo)準(zhǔn)不統(tǒng)一；四是政策法規(guī)不健全。
在政府?dāng)?shù)據(jù)開(kāi)放方面，我國(guó)存在三大主要問(wèn)題：一是我國(guó)尚未建立起全國(guó)統(tǒng)一的大數(shù)據(jù)平臺(tái)，導(dǎo)致形成一個(gè)個(gè)的信息孤島，影響了政府?dāng)?shù)據(jù)開(kāi)放的成效；二是我國(guó)的數(shù)據(jù)污染很嚴(yán)重，很多原始數(shù)據(jù)存在夸大或瞞報(bào)現(xiàn)象；三是一些地方?jīng)]有把大數(shù)據(jù)當(dāng)成政府公共服務(wù)的重要部分，而當(dāng)成盈利的資源。
大數(shù)據(jù)蘊(yùn)藏著新哲學(xué)思想和優(yōu)勢(shì)
首先，大數(shù)據(jù)拓展了新的哲學(xué)思想。大數(shù)據(jù)既能處理“因果關(guān)系”又能處理“相關(guān)關(guān)系”，即不僅能夠回答“為什么”又能回答“是什么”。在小數(shù)據(jù)時(shí)代，只能通過(guò)抽樣調(diào)查的方式來(lái)回答“為什么”。而大數(shù)據(jù)則能通過(guò)全樣本的方式來(lái)回答“是什么”，即發(fā)現(xiàn)相關(guān)關(guān)系，這能夠幫助我們更好地認(rèn)識(shí)和了解世界。例如，沃爾瑪發(fā)現(xiàn)在尿布旁邊放上啤酒能夠提高啤酒的銷量，就把尿布和啤酒混搭銷售。毫無(wú)疑問(wèn)，尿布和啤酒之間并無(wú)因果關(guān)系，而二者在一起就形成很好的相關(guān)關(guān)系。
其次，大數(shù)據(jù)分析具有顯著優(yōu)勢(shì)。一是大數(shù)據(jù)能夠?qū)崿F(xiàn)分析的高度智能化，既能實(shí)現(xiàn)信息收集和分析的智能化，又能實(shí)現(xiàn)數(shù)據(jù)與用戶需求的有效匹配。二是及時(shí)、迅速。大數(shù)據(jù)分析改變之前的市場(chǎng)調(diào)研和數(shù)據(jù)分析相對(duì)滯后的模式和方式，能夠及時(shí)、迅速地進(jìn)行分析。例如，傳統(tǒng)的市場(chǎng)調(diào)研一般耗時(shí)幾個(gè)月，而基于互聯(lián)網(wǎng)的大數(shù)據(jù)調(diào)研則只需要幾天就能得到調(diào)研結(jié)果。三是成本相對(duì)較低。由于可以大量使用技術(shù)手段，其成本相應(yīng)較低。一般來(lái)說(shuō)，傳統(tǒng)的市場(chǎng)調(diào)研方式，每一份問(wèn)卷都需要近百元，而互聯(lián)網(wǎng)調(diào)研一份問(wèn)卷只需要4元左右。
大數(shù)據(jù)實(shí)施的三大關(guān)鍵點(diǎn)
首先，數(shù)據(jù)的可獲得度。目前在國(guó)內(nèi)，大數(shù)據(jù)的發(fā)展嚴(yán)重受制于政府信息的公開(kāi)性不夠，很多數(shù)據(jù)難以獲得，導(dǎo)致難以實(shí)現(xiàn)真正的大數(shù)據(jù)挖掘和分析，這就要求政府及時(shí)開(kāi)放更多的數(shù)據(jù)，以提高數(shù)據(jù)的可獲得度。
其次，進(jìn)行科學(xué)的模型建構(gòu)。模型的科學(xué)性直接決定著數(shù)據(jù)分析的質(zhì)量，這就要求有高超的建模水平，當(dāng)然數(shù)據(jù)量越多也有助于模型的合理構(gòu)建。
第三，利用專家對(duì)觀點(diǎn)進(jìn)行提煉。為決策提供依據(jù)的基于數(shù)據(jù)挖掘的獨(dú)到、高質(zhì)量的觀點(diǎn)，高度依賴于高質(zhì)量的數(shù)據(jù)解釋，這就體現(xiàn)了行業(yè)專家的價(jià)值。
在大數(shù)據(jù)時(shí)代，大數(shù)據(jù)已經(jīng)成為整個(gè)社會(huì)的底層架構(gòu)和標(biāo)配，其上的一切都必須按照大數(shù)據(jù)的要求進(jìn)行重構(gòu)，大數(shù)據(jù)在解決大問(wèn)題方面尤為有效，目前在語(yǔ)音搜索、智慧城市建設(shè)、互聯(lián)網(wǎng)金融治理等方面取得了長(zhǎng)足的進(jìn)展，未來(lái)更多的領(lǐng)域都必將被大數(shù)據(jù)所革命和重構(gòu)。
重慶分公司
重慶分公司
