1.4.1　硬件性價比提高與軟件技術進步

計算機性價比的提高，磁盤價格的下降，利用通用服務器對大量數據進行高速處理的軟件技術Hadoop的誕生，以及隨著云計算的興起，甚至已經無須自行搭建這樣的大規模環境——上述這些因素，大幅降低了大數據存儲和處理的門檻。因此，過去只有像NASA這樣的研究機構以及屈指可數的幾家特大企業才能做到的對大量數據的深入分析，現在只要極小的成本和時間就可以完成。無論是剛剛創業的公司還是存在多年的公司，也無論是中小企業還是大企業，都可以對大數據進行充分的利用。

1.計算機性價比的提高

承擔數據處理任務的計算機，其處理能力遵循摩爾定律，一直在不斷進化。所謂摩爾定律，是美國英特爾公司共同創始人之一的高登·摩爾（Gordon Moore）于1965年提出的一個觀點，即“半導體芯片的集成度，大約每18個月會翻一番”。從家電賣場中所陳列的計算機規格指標就可以一目了然地看出，現在以同樣的價格能夠買到的計算機，其處理能力已經和過去不可同日而語。

2.磁盤價格的下降

除了CPU性能的提高，硬盤等存儲器（數據的存儲裝置）的價格也明顯下降。2000年的硬盤驅動器平均每吉字節容量的單價為16～19美元，而現在卻只有7美分。

變化的不僅僅是價格，存儲器在重量方面也產生了巨大的進步。1982年日立最早開發的超1GB級硬盤驅動器（容量為1.2GB），質量約為250磅（約合113kg）。而現在，32GB的微型SD卡重量卻只有0.5g左右，技術進步的速度相當驚人。

3.大規模數據分布式處理技術Hadoop的誕生

Hadoop是一種可以在通用服務器上運行的開源分布式處理技術，它的誕生成為目前大數據浪潮的第一推動力。如果只是結構化數據不斷增長，用傳統的關系型數據庫和數據倉庫，或者是其衍生技術，就可以進行存儲和處理，但這樣的技術無法對非結構化數據進行處理。Hadoop的最大特征，就是能夠對大量非結構化數據進行高速處理。