第3章 實(shí)現(xiàn)教育大數(shù)據(jù)的關(guān)鍵技術(shù)

2015年9月，國務(wù)院發(fā)布了《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要》;2016年5月，《“互聯(lián)網(wǎng)+”人工智能三年行動(dòng)實(shí)施方案》出臺(tái)；2017年3月，“人工智能”首次被寫入政府工作報(bào)告；2018年3月，教育部對(duì)各類教育數(shù)據(jù)的管理、互聯(lián)互通、共享公開、數(shù)據(jù)安全進(jìn)行了規(guī)范。伴隨著我國各項(xiàng)政策的發(fā)布以及在各個(gè)科技領(lǐng)域的重大突破，我國快速進(jìn)入了全民創(chuàng)新創(chuàng)業(yè)時(shí)代。回顧我國五千年的歷史，沒有任何一個(gè)時(shí)期，能像如今這樣重視科學(xué)技術(shù)。科技不再披著神秘的面紗，科技也不再是束之高閣的公式與符號(hào)，科技正走向大眾，逐步被人們所知曉和了解。

從1946年美國國防部利用第一臺(tái)電子計(jì)算機(jī)“ENIAC”來計(jì)算彈道數(shù)據(jù)，到如今，人類幾乎是跑步進(jìn)入了大數(shù)據(jù)時(shí)代。我們對(duì)數(shù)據(jù)的利用，從過去的抽樣調(diào)查到如今的全量數(shù)據(jù)分析，使得我們能夠從一些原本無意義的數(shù)據(jù)中發(fā)現(xiàn)巨大的價(jià)值。數(shù)量龐大、類型多樣的數(shù)據(jù)呈爆炸式增長(zhǎng)，已超出了傳統(tǒng)IT基礎(chǔ)架構(gòu)的處理能力，憑借這樣的實(shí)況，人們開發(fā)了很多新的技術(shù)，使這些數(shù)據(jù)釋放出更多的隱藏價(jià)值。

這樣的一些新興技術(shù)也給了教育行業(yè)巨大的啟發(fā)。在過去很長(zhǎng)一段時(shí)間里，學(xué)校關(guān)注并利用的數(shù)據(jù)多以各個(gè)業(yè)務(wù)系統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)為主，通過簡(jiǎn)單的統(tǒng)計(jì)對(duì)其結(jié)果進(jìn)行分析。事實(shí)上，除了那些存在數(shù)據(jù)庫中的結(jié)構(gòu)化的數(shù)據(jù)外，還有大量的視頻、音頻、文檔等非結(jié)構(gòu)化數(shù)據(jù)產(chǎn)生于日常教學(xué)中。如今技術(shù)的發(fā)展已經(jīng)讓我們能夠從容地處理這些數(shù)據(jù)，教育的顛覆性變革也許僅僅在你選擇了某一個(gè)技術(shù)框架之后。然而，在這樣一個(gè)科技引領(lǐng)發(fā)展的時(shí)代，各種高新技術(shù)層出不窮，皓首窮經(jīng)也無法面面俱到。本章將圍繞“數(shù)據(jù)集成、數(shù)據(jù)處理、數(shù)據(jù)分析”的全過程，為大家回顧時(shí)代發(fā)展過程中的一些關(guān)鍵技術(shù)。