前言

作為過去十年里最重要的信息技術，大數據技術深刻影響了人們生活的方方面面。如今，從在家購物到出門打車，從投資理財到金融風控，從健康管理到公共安全，人們無時無刻不在使用各種大數據。在大數據引領的信息時代下，如何有效管理大數據，從大數據中獲取有價值的信息，提升組織者的決策水平，發現新的利潤增長點，成為各界持續關注和廣泛研究的重要課題。大數據管理技術已經成為互聯網等行業的核心競爭力之一。

大數據管理技術涉及了大數據管理的各個方面，包括數據存儲、數據查詢、數據治理、數據集成、數據處理、數據分析、數據可視化。傳統關系數據庫的一站式服務已經無法滿足大數據領域的數據處理需求。一方面，以互聯網應用為代表的大數據應用產生的龐大數據量超出了傳統工具的處理能力；另一方面，異構數據源和種類繁多的大數據應用對數據處理和數據查詢提出了諸多靈活性需求，這些需求大多不易通過傳統的SQL查詢來實現。為解決數據量大和數據處理需求多樣性所帶來的挑戰，大數據管理技術發展出了一系列革新的數據管理技術。

本書從大數據管理技術產生的歷史背景出發，對大數據管理技術的起源和發展進行了全面介紹，詳細討論大數據管理技術，包括大數據建模技術、大數據存儲和索引技術、大數據查詢處理技術、大數據事務處理技術和大數據總線技術等，并在此基礎上，對大數據應用系統進行了全面分析。

本書采取理論與實踐并重的方式介紹大數據管理技術。在理論層面，力求覆蓋面廣，涵蓋大數據管理技術的所有重要分支。在具體技術層面，力求深入淺出，重點介紹技術產生的應用背景，以及該技術解決應用中痛點問題的基本原理。對技術實現細節感興趣的讀者，可以通過書中列出的引文，從原始文獻中獲取相關信息。在實踐層面，本書通過三章內容，具體介紹大數據管理技術如何應用于實際的大數據應用系統。希望這樣的安排，能夠滿足不同層面的讀者對大數據管理技術的研習需求。

本書面向大數據應用的開發人員、大數據管理系統的開發人員以及大數據管理技術的研究人員，也適用于高等院校相關專業師生學習。本書要求讀者具有一定的計算機基礎和數據庫相關知識。希望本書在幫助讀者了解大數據技術發展的同時，能夠為相關領域的工作者在進行大數據系統開發時提供借鑒。

本書由浙江大學計算機科學與工程系陳剛教授、江大偉研究員、高云君教授共同編著。在本書的撰寫過程中，丹麥奧爾堡大學的助理教授陳璐博士給予了有益的反饋。浙江大學計算機科學與工程系研究生張哲檳、魯鵬凱、胡文濤、蔣飛躍、卜文鳳、張遠亮、仲啟露等同學參與本書的校對以及插圖繪制等工作。在此，向上述在本書撰寫過程中給予幫助的老師和同學們表示深深的感謝。

由于作者水平有限，書中難免會有疏漏之處，敬請同行和讀者不吝賜教，我們當深表感謝。

編著者