1.3　如何處理大數(shù)據(jù)

隨著數(shù)據(jù)越來(lái)越多，我們自然就會(huì)面臨兩個(gè)問(wèn)題，第一個(gè)問(wèn)題是這些大量歷史數(shù)據(jù)還有用嗎，為了節(jié)省空間可否刪除呢？畢竟硬件資源有限。答案是有用的，而且可能帶來(lái)意想不到的價(jià)值。我們可能從大量數(shù)據(jù)中找到某些行業(yè)的規(guī)律或規(guī)則，這些規(guī)則可能會(huì)帶來(lái)巨大收益。第二個(gè)問(wèn)題就是如何處理這些海量歷史大數(shù)據(jù)呢？我們的處理辦法就是傳統(tǒng)的商業(yè)智能領(lǐng)域的數(shù)據(jù)挖掘技術(shù)。另外，還有一種處理技術(shù)是目前比較火的云計(jì)算技術(shù)，這種技術(shù)對(duì)數(shù)據(jù)處理的實(shí)時(shí)性要求很高，一般要求秒級(jí)處理。讀者可以通過(guò)以下一個(gè)小例子初步了解一下數(shù)據(jù)挖掘技術(shù)和基于云平臺(tái)的分布式處理技術(shù)。