- PySpark大數(shù)據(jù)分析與應(yīng)用
- 戴剛 張良均主編
- 1775字
- 2025-01-07 16:58:54
序
PREFACE
隨著大數(shù)據(jù)時(shí)代的到來(lái),移動(dòng)互聯(lián)網(wǎng)和智能手機(jī)迅速普及,多種形態(tài)的移動(dòng)互聯(lián)網(wǎng)應(yīng)用蓬勃發(fā)展,電子商務(wù)、云計(jì)算、互聯(lián)網(wǎng)金融、物聯(lián)網(wǎng)、虛擬現(xiàn)實(shí)、智能機(jī)器人等不斷滲透并重塑傳統(tǒng)產(chǎn)業(yè),而與此同時(shí),大數(shù)據(jù)當(dāng)之無(wú)愧地成為新的產(chǎn)業(yè)革命核心。
2019年8月,聯(lián)合國(guó)教科文組織以聯(lián)合國(guó)6種官方語(yǔ)言正式發(fā)布《北京共識(shí)——人工智能與教育》,《北京共識(shí)》中提出:“通過(guò)人工智能與教育的系統(tǒng)融合,全面創(chuàng)新教育、教學(xué)和學(xué)習(xí)方式,并利用人工智能加快建設(shè)開(kāi)放靈活的教育體系,確保全民享有公平、適合每個(gè)人且優(yōu)質(zhì)的終身學(xué)習(xí)機(jī)會(huì)”。這表明基于大數(shù)據(jù)的人工智能和教育均進(jìn)入了新的階段。
高等教育是教育系統(tǒng)中的重要組成部分,高等院校作為人才培養(yǎng)的重要平臺(tái),肩負(fù)著為社會(huì)培育人才的重要使命。2018年6月21日召開(kāi)的新時(shí)代全國(guó)高等學(xué)校本科教育工作會(huì)議首次提出了“金課”的概念。“金專(zhuān)”“金課”“金師”迅速成為新時(shí)代高等教育的熱詞。如何建設(shè)具有中國(guó)特色的大數(shù)據(jù)相關(guān)專(zhuān)業(yè),以及如何打造世界水平的“金專(zhuān)”“金課”“金師”“金教材”是當(dāng)代教育教學(xué)改革的難點(diǎn)和熱點(diǎn)。
實(shí)踐教學(xué)是指在一定的理論指導(dǎo)下,通過(guò)實(shí)踐引導(dǎo),使學(xué)習(xí)者獲得實(shí)踐知識(shí)、掌握實(shí)踐技能、鍛煉實(shí)踐能力、提高綜合素質(zhì)的教學(xué)活動(dòng)。實(shí)踐教學(xué)在高校人才培養(yǎng)中處于重要地位,是鞏固和加深理論知識(shí)的有效途徑。目前,高校大數(shù)據(jù)相關(guān)專(zhuān)業(yè)的教學(xué)體系設(shè)置過(guò)多地偏向理論教學(xué),課程設(shè)置冗余或缺漏,知識(shí)體系不健全,且與企業(yè)實(shí)際應(yīng)用契合度不高,學(xué)生很難將理論轉(zhuǎn)化為實(shí)踐應(yīng)用技能。為了有效解決該問(wèn)題,“泰迪杯”數(shù)據(jù)挖掘挑戰(zhàn)賽組織委員會(huì)與人民郵電出版社共同策劃了“大數(shù)據(jù)技術(shù)精品系列教材”,這恰與2019年10月24日教育部發(fā)布的《教育部關(guān)于一流本科課程建設(shè)的實(shí)施意見(jiàn)》(教高〔2019〕8號(hào))中提出的“堅(jiān)持分類(lèi)建設(shè)”“堅(jiān)持扶強(qiáng)扶特”“提升高階性”“突出創(chuàng)新性”“增加挑戰(zhàn)度”原則契合。
“泰迪杯”數(shù)據(jù)挖掘挑戰(zhàn)賽自2013年創(chuàng)辦以來(lái),一直致力于推廣高校數(shù)據(jù)挖掘?qū)嵺`教學(xué),培養(yǎng)學(xué)生數(shù)據(jù)挖掘的應(yīng)用和創(chuàng)新能力。挑戰(zhàn)賽的賽題均為經(jīng)過(guò)適當(dāng)簡(jiǎn)化和加工的實(shí)際問(wèn)題,來(lái)源于各企業(yè)、管理機(jī)構(gòu)和科研院所等,非常貼近現(xiàn)實(shí)的熱點(diǎn)需求。賽題中的數(shù)據(jù)只做必要的脫敏處理,力求保持原始狀態(tài)。“泰迪杯”數(shù)據(jù)挖掘挑戰(zhàn)賽圍繞數(shù)據(jù)挖掘的整個(gè)流程,從數(shù)據(jù)采集、數(shù)據(jù)遷移、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)分析與挖掘到數(shù)據(jù)可視化,涵蓋企業(yè)應(yīng)用中的各個(gè)環(huán)節(jié),與目前大數(shù)據(jù)專(zhuān)業(yè)人才培養(yǎng)目標(biāo)高度一致。“泰迪杯”數(shù)據(jù)挖掘挑戰(zhàn)賽不依賴(lài)數(shù)學(xué)建模,甚至不依賴(lài)傳統(tǒng)模型的競(jìng)賽形式,這使得“泰迪杯”數(shù)據(jù)挖掘挑戰(zhàn)賽在全國(guó)各大高校反響熱烈,且得到了全國(guó)各界專(zhuān)家學(xué)者的認(rèn)可與支持。2018年,“泰迪杯”增加了子賽項(xiàng)——數(shù)據(jù)分析技能賽,為應(yīng)用型本科、高職和中職技能型人才培養(yǎng)提供理論、技術(shù)和資源方面的支持。截至2021年,全國(guó)共有超1000所高校,約2萬(wàn)名研究生、9萬(wàn)名本科生、2萬(wàn)名高職生參加了“泰迪杯”數(shù)據(jù)挖掘挑戰(zhàn)賽和數(shù)據(jù)分析技能賽。
本系列教材的第一大特點(diǎn)是注重學(xué)生的實(shí)踐能力培養(yǎng),針對(duì)高校實(shí)踐教學(xué)中的痛點(diǎn),首次提出“魚(yú)骨教學(xué)法”的概念。以企業(yè)真實(shí)需求為導(dǎo)向,學(xué)生學(xué)習(xí)技能時(shí)緊緊圍繞企業(yè)實(shí)際應(yīng)用需求,將需掌握的理論知識(shí)通過(guò)企業(yè)案例的形式進(jìn)行銜接,達(dá)到知行合一、以用促學(xué)的目的。第二大特點(diǎn)是以大數(shù)據(jù)應(yīng)用為核心,緊緊圍繞大數(shù)據(jù)應(yīng)用閉環(huán)的流程進(jìn)行教學(xué)。本系列教材涵蓋企業(yè)大數(shù)據(jù)應(yīng)用中的各個(gè)環(huán)節(jié),符合企業(yè)大數(shù)據(jù)應(yīng)用真實(shí)場(chǎng)景,使學(xué)生能從宏觀上理解大數(shù)據(jù)技術(shù)在企業(yè)中的具體應(yīng)用場(chǎng)景及應(yīng)用方法。
在教育部全面實(shí)施“六卓越一拔尖”計(jì)劃2.0的背景下,對(duì)如何促進(jìn)我國(guó)高等教育人才培養(yǎng)體制機(jī)制的綜合改革,以及如何重新定位和全面提升我國(guó)高等教育質(zhì)量,本系列教材將起到拋磚引玉的作用,從而加快推進(jìn)以新工科、新醫(yī)科、新農(nóng)科、新文科為代表的一流本科課程的“雙萬(wàn)計(jì)劃”建設(shè);落實(shí)“讓學(xué)生忙起來(lái)、管理嚴(yán)起來(lái)和教學(xué)活起來(lái)”措施,讓大數(shù)據(jù)相關(guān)專(zhuān)業(yè)的人才培養(yǎng)質(zhì)量有質(zhì)的提升;借助數(shù)據(jù)科學(xué)的引導(dǎo),在文、理、農(nóng)、工、醫(yī)等方面全方位發(fā)力,培養(yǎng)各個(gè)行業(yè)的卓越人才及未來(lái)的領(lǐng)軍人才。同時(shí)本系列教材將根據(jù)讀者的反饋意見(jiàn)和建議及時(shí)改進(jìn)、完善,努力成為大數(shù)據(jù)時(shí)代的新型“編寫(xiě)、使用、反饋”螺旋式上升的系列教材建設(shè)樣板。
汕頭大學(xué)校長(zhǎng)
教育部高等學(xué)校大學(xué)數(shù)學(xué)課程教學(xué)指導(dǎo)委員會(huì)副主任委員
“泰迪杯”數(shù)據(jù)挖掘挑戰(zhàn)賽組織委員會(huì)主任
“泰迪杯”數(shù)據(jù)分析技能賽組織委員會(huì)主任
2021年7月于粵港澳大灣區(qū)
- App+軟件+游戲+網(wǎng)站界面設(shè)計(jì)教程
- Libgdx Cross/platform Game Development Cookbook
- 云計(jì)算與大數(shù)據(jù)應(yīng)用
- WS-BPEL 2.0 Beginner's Guide
- Apache Kylin權(quán)威指南
- 數(shù)據(jù)庫(kù)原理與應(yīng)用
- Unreal Engine Virtual Reality Quick Start Guide
- MySQL DBA修煉之道
- 區(qū)塊鏈+:落地場(chǎng)景與應(yīng)用實(shí)戰(zhàn)
- 大數(shù)據(jù)數(shù)學(xué)基礎(chǔ)(R語(yǔ)言描述)
- 大數(shù)據(jù)時(shí)代系列(套裝9冊(cè))
- 數(shù)據(jù)中心經(jīng)營(yíng)之道
- 掌中寶:電腦綜合應(yīng)用技巧
- 達(dá)夢(mèng)數(shù)據(jù)庫(kù)集群
- Getting Started with Review Board