1.3　大數(shù)據(jù)

隨著物聯(lián)網(wǎng)和云計算技術的發(fā)展，海量的數(shù)據(jù)以前所未有的速度從異構數(shù)據(jù)源產(chǎn)生，這些數(shù)據(jù)源所在的領域有醫(yī)療健康、政府機構、社交網(wǎng)絡、環(huán)境監(jiān)測和金融市場等。在這些景象的背后，存在大量強大的系統(tǒng)和分布式應用程序來支持與數(shù)據(jù)相關的操作，例如智能電網(wǎng)（smart grid）系統(tǒng)^[44]、醫(yī)療健康（healthcare）系統(tǒng)^[45]、零售業(yè)（retailing）系統(tǒng)^[46]、政府（government）系統(tǒng)等。在大數(shù)據(jù)的變革發(fā)生之前，絕大多數(shù)機構和公司都沒有能力長期保存歸檔數(shù)據(jù)，也無法高效地管理和利用大規(guī)模的數(shù)據(jù)集。實際上，現(xiàn)有的傳統(tǒng)技術能夠應對的存儲和管理規(guī)模都是有限的。在大數(shù)據(jù)環(huán)境下，傳統(tǒng)技術缺乏可擴展性和靈活性，其性能也無法令人滿意。當前，針對海量的數(shù)據(jù)集，需要設計涵蓋清洗、處理、分析、加載等操作的可行性方案。業(yè)界的公司越來越意識到針對大數(shù)據(jù)的處理與分析是使企業(yè)具有競爭力的重要因素。