大數(shù)據(jù)發(fā)展存在的主要問題

1、（一）數(shù)據(jù)孤島問題（一）數(shù)據(jù)孤島問題大數(shù)據(jù)的基礎(chǔ)在于數(shù)據(jù)，但是如果拿不到底層的數(shù)據(jù)，數(shù)據(jù)分析也就無從談起。隨著社交網(wǎng)絡(luò)、移動互聯(lián)網(wǎng)和物聯(lián)網(wǎng)的興起以及社交媒體的發(fā)展導(dǎo)致各種海量數(shù)據(jù)生成，帶來了無限想象力和商業(yè)應(yīng)用價值?！暗谝粋€問題就是沒數(shù)據(jù)，理論上我們中國有很多數(shù)據(jù)，但實(shí)際做數(shù)據(jù)分析會發(fā)現(xiàn)非常困難?！敝袊茖W(xué)院院士、北京大數(shù)據(jù)研究院院長鄂維南表示，數(shù)據(jù)孤島是一個嚴(yán)重的問題，從技術(shù)層面看，大數(shù)據(jù)的主要挑戰(zhàn)是采集和分析。不同部門的數(shù)據(jù)儲存在不

2、同地方，大數(shù)據(jù)來源眾多、數(shù)量巨大、形式各異。大數(shù)據(jù)最高的層次就是用數(shù)據(jù)來形成智慧，這需要從中獲得一目了然的信息。做數(shù)據(jù)分析先要整合數(shù)據(jù)，整合數(shù)據(jù)需要真正高效、可靠的數(shù)據(jù)管理和分析平臺。社會大數(shù)據(jù)是一種社會公共資源，由于政府部門之間、企業(yè)之間、政府和企業(yè)間信息不對稱、制度法律不具體、缺乏公共平臺和共享渠道等多重因素，還有多樣的設(shè)備、各式各樣的應(yīng)用場景，導(dǎo)致大量政府?dāng)?shù)據(jù)存在“不愿公開、不敢公開、不能公開、不會公開”的問題，早就了一個個企業(yè)和

3、政府管理部門的數(shù)據(jù)孤島。阻礙數(shù)據(jù)共享的另一個主要原因是缺乏動力和擔(dān)心安全。貴陽大數(shù)據(jù)交易所執(zhí)行總裁王叁壽透露，不少企業(yè)以保護(hù)商業(yè)產(chǎn)生的海量數(shù)據(jù)需要有一個強(qiáng)有力且安全的平臺來對這些數(shù)據(jù)進(jìn)行收集、分析。微軟大中華區(qū)董事長兼CEO柯睿杰認(rèn)為，數(shù)據(jù)智能并非那么觸手可及。要想從來源眾多、數(shù)量巨大、形式各異的大數(shù)據(jù)獲得一目了然的信息，就需要真正高效、可靠的數(shù)據(jù)管理和分析平臺，從而為用戶提出一個切實(shí)可行的方案。中國當(dāng)前的數(shù)據(jù)產(chǎn)生量占全球數(shù)據(jù)總量的13

4、%，增長速度也很快，如圖3所示。如何處理巨量數(shù)據(jù)是中國大數(shù)據(jù)產(chǎn)業(yè)面臨的首要技術(shù)問題。中國的數(shù)據(jù)體量特別大中國的視頻比任何國家都要多，這些數(shù)據(jù)儲存困難，需要用的時候往往就沒了。59%的數(shù)據(jù)是無效數(shù)據(jù)，70%的數(shù)據(jù)過于復(fù)雜，85%的企業(yè)數(shù)據(jù)架構(gòu)無法適應(yīng)數(shù)據(jù)量和復(fù)雜性增長的需求，98%的企業(yè)無法及時、準(zhǔn)確地為業(yè)務(wù)提供正確的信息。這些問題都給數(shù)據(jù)統(tǒng)計(jì)分析帶來了困難。另一方面，數(shù)據(jù)分析本身也是一個難題。大數(shù)據(jù)中，絕大部分屬于非結(jié)構(gòu)化的數(shù)據(jù)，無法用