大數(shù)據(jù)發(fā)展存在的主要問題

1、（一）數(shù)據(jù)孤島問題（一）數(shù)據(jù)孤島問題大數(shù)據(jù)的基礎(chǔ)在于數(shù)據(jù)，但是如果拿不到底層的數(shù)據(jù)，數(shù)據(jù)分析也就無(wú)從談起。隨著社交網(wǎng)絡(luò)、移動(dòng)互聯(lián)網(wǎng)和物聯(lián)網(wǎng)的興起以及社交媒體的發(fā)展導(dǎo)致各種海量數(shù)據(jù)生成，帶來(lái)了無(wú)限想象力和商業(yè)應(yīng)用價(jià)值。“第一個(gè)問題就是沒數(shù)據(jù)，理論上我們中國(guó)有很多數(shù)據(jù)，但實(shí)際做數(shù)據(jù)分析會(huì)發(fā)現(xiàn)非常困難。”中國(guó)科學(xué)院院士、北京大數(shù)據(jù)研究院院長(zhǎng)鄂維南表示，數(shù)據(jù)孤島是一個(gè)嚴(yán)重的問題，從技術(shù)層面看，大數(shù)據(jù)的主要挑戰(zhàn)是采集和分析。不同部門的數(shù)據(jù)儲(chǔ)存在不

2、同地方，大數(shù)據(jù)來(lái)源眾多、數(shù)量巨大、形式各異。大數(shù)據(jù)最高的層次就是用數(shù)據(jù)來(lái)形成智慧，這需要從中獲得一目了然的信息。做數(shù)據(jù)分析先要整合數(shù)據(jù)，整合數(shù)據(jù)需要真正高效、可靠的數(shù)據(jù)管理和分析平臺(tái)。社會(huì)大數(shù)據(jù)是一種社會(huì)公共資源，由于政府部門之間、企業(yè)之間、政府和企業(yè)間信息不對(duì)稱、制度法律不具體、缺乏公共平臺(tái)和共享渠道等多重因素，還有多樣的設(shè)備、各式各樣的應(yīng)用場(chǎng)景，導(dǎo)致大量政府?dāng)?shù)據(jù)存在“不愿公開、不敢公開、不能公開、不會(huì)公開”的問題，早就了一個(gè)個(gè)企業(yè)和

3、政府管理部門的數(shù)據(jù)孤島。阻礙數(shù)據(jù)共享的另一個(gè)主要原因是缺乏動(dòng)力和擔(dān)心安全。貴陽(yáng)大數(shù)據(jù)交易所執(zhí)行總裁王叁壽透露，不少企業(yè)以保護(hù)商業(yè)產(chǎn)生的海量數(shù)據(jù)需要有一個(gè)強(qiáng)有力且安全的平臺(tái)來(lái)對(duì)這些數(shù)據(jù)進(jìn)行收集、分析。微軟大中華區(qū)董事長(zhǎng)兼CEO柯睿杰認(rèn)為，數(shù)據(jù)智能并非那么觸手可及。要想從來(lái)源眾多、數(shù)量巨大、形式各異的大數(shù)據(jù)獲得一目了然的信息，就需要真正高效、可靠的數(shù)據(jù)管理和分析平臺(tái)，從而為用戶提出一個(gè)切實(shí)可行的方案。中國(guó)當(dāng)前的數(shù)據(jù)產(chǎn)生量占全球數(shù)據(jù)總量的13

4、%，增長(zhǎng)速度也很快，如圖3所示。如何處理巨量數(shù)據(jù)是中國(guó)大數(shù)據(jù)產(chǎn)業(yè)面臨的首要技術(shù)問題。中國(guó)的數(shù)據(jù)體量特別大中國(guó)的視頻比任何國(guó)家都要多，這些數(shù)據(jù)儲(chǔ)存困難，需要用的時(shí)候往往就沒了。59%的數(shù)據(jù)是無(wú)效數(shù)據(jù)，70%的數(shù)據(jù)過于復(fù)雜，85%的企業(yè)數(shù)據(jù)架構(gòu)無(wú)法適應(yīng)數(shù)據(jù)量和復(fù)雜性增長(zhǎng)的需求，98%的企業(yè)無(wú)法及時(shí)、準(zhǔn)確地為業(yè)務(wù)提供正確的信息。這些問題都給數(shù)據(jù)統(tǒng)計(jì)分析帶來(lái)了困難。另一方面，數(shù)據(jù)分析本身也是一個(gè)難題。大數(shù)據(jù)中，絕大部分屬于非結(jié)構(gòu)化的數(shù)據(jù)，無(wú)法用