3月21日,教育部公布了2017年度普通高等學(xué)校本科專業(yè)備案和審批結(jié)果的通知,作為第三批新增高校,此次共有247所高校獲批“數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)”專業(yè)。
至此,全國(guó)已有278所高校獲批“數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)”專業(yè),未來幾年還會(huì)有越來越多的高校進(jìn)行專業(yè)備案。對(duì)于各大高校而言,在專業(yè)獲批之后,如何開展下一步課程與教學(xué)體系建設(shè),成為了重中之重。
數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)(專業(yè)代碼:080910T)是一個(gè)軟硬件結(jié)合,以計(jì)算技術(shù)為基礎(chǔ),以數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)為特色的寬口徑專業(yè),專業(yè)建設(shè)面臨挑戰(zhàn)。對(duì)此,云創(chuàng)大數(shù)據(jù)早早地在專業(yè)課程體系、實(shí)驗(yàn)平臺(tái)建設(shè)、師資培訓(xùn)等方面布局發(fā)力,目前可為高校提供成套的教材資源、大數(shù)據(jù)綜合實(shí)訓(xùn)平臺(tái)以及師資培訓(xùn)等專業(yè)建設(shè)支持。
大數(shù)據(jù)課程體系
在大數(shù)據(jù)教學(xué)中,本科院校的實(shí)踐教學(xué)注重系統(tǒng)性,偏向新技術(shù)的應(yīng)用,且對(duì)工程實(shí)踐能力要求更高。為此,清華大學(xué)博士、南京大數(shù)據(jù)研究院院長(zhǎng)劉鵬教授聯(lián)合國(guó)內(nèi)多所高校從事一線教學(xué)科研任務(wù)的專業(yè)師資耗時(shí)1年時(shí)間,編寫了《云計(jì)算》、《大數(shù)據(jù)》、《大數(shù)據(jù)庫(kù)》、《數(shù)據(jù)挖掘》、《深度學(xué)習(xí)》、《大數(shù)據(jù)可視化》、《虛擬化與容器》、《大數(shù)據(jù)實(shí)驗(yàn)手冊(cè)》等本科系列教材,可為大數(shù)據(jù)教學(xué)提供系統(tǒng)的教材支撐。
1.《云計(jì)算》
購(gòu)買鏈接:
https://weidian.com/item.html?itemID=1469775685&wfr=wxp_wxh5&ifr=itemdetail&spider_token=0725&spider=seller.zx-shopdetail.5.11
本書是被國(guó)內(nèi)眾多高校采用的教材《云計(jì)算》(名列中國(guó)計(jì)算機(jī)類圖書被引用量第一名)的第三版。本書追蹤前沿的云計(jì)算技術(shù),相比第二版更新了60%以上的內(nèi)容,包括大數(shù)據(jù)與云計(jì)算、Google云計(jì)算、Amazon云計(jì)算、微軟云計(jì)算、Hadoop 2.0及其生態(tài)圈、虛擬化技術(shù)、OpenStack開源云計(jì)算、云計(jì)算數(shù)據(jù)中心、云計(jì)算核心算法和中國(guó)云計(jì)算技術(shù)等。中國(guó)云計(jì)算(chinacloud.cn)、中國(guó)大數(shù)據(jù)(thebigdata.cn)網(wǎng)站等專業(yè)網(wǎng)站為本書學(xué)習(xí)提供技術(shù)支撐。
2.《大數(shù)據(jù)》
購(gòu)買鏈接:
https://weidian.com/item.html?itemID=2040524569&wfr=wxp_wxh5&ifr=itemdetail&spider_token=755d&spider=seller.zx-shopdetail.5.7
本書是國(guó)內(nèi)大多數(shù)高校采用的知名教材《云計(jì)算》(1~3版)的姊妹篇。本書系統(tǒng)地介紹了大數(shù)據(jù)的理論知識(shí)和實(shí)戰(zhàn)應(yīng)用,包括大數(shù)據(jù)采集與預(yù)處理、數(shù)據(jù)挖掘算法與工具、深度學(xué)習(xí)以及大數(shù)據(jù)可視化等,并深度剖析了大數(shù)據(jù)在互聯(lián)網(wǎng)、商業(yè)和典型行業(yè)的應(yīng)用。本書實(shí)驗(yàn)可以在大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)(https://bd.cstor.cn)上遠(yuǎn)程開展,也可在高校部署的BDRack大數(shù)據(jù)實(shí)驗(yàn)一體機(jī)上本地開展。
3.《大數(shù)據(jù)庫(kù)》
購(gòu)買鏈接:
https://weidian.com/item.html?itemID=2132275086&wfr=wxp_wxh5&ifr=itemdetail&spider_token=51ce&spider=seller.zx-shopdetail.5.5
本書緊跟大數(shù)據(jù)的發(fā)展前沿,系統(tǒng)地介紹了大數(shù)據(jù)庫(kù)的理論知識(shí)和實(shí)戰(zhàn)應(yīng)用,包括大數(shù)據(jù)庫(kù)概述、分布式數(shù)據(jù)庫(kù)HBase、數(shù)據(jù)倉(cāng)庫(kù)工具Hive、大數(shù)據(jù)查詢系統(tǒng)Impala、內(nèi)存數(shù)據(jù)庫(kù)Spark、SparkSQL、鍵值數(shù)據(jù)庫(kù)、流式數(shù)據(jù)庫(kù)和大數(shù)據(jù)應(yīng)用托管平臺(tái)Docker等,既有理論深度,也有實(shí)踐價(jià)值。中國(guó)大數(shù)據(jù)(thebigdata.cn)、中國(guó)云計(jì)算(chinacloud.cn)等專業(yè)網(wǎng)站將免費(fèi)提供PPT和其他資料,為本書的學(xué)習(xí)提供技術(shù)支撐。
4.《數(shù)據(jù)挖掘》
購(gòu)買鏈接:
https://weidian.com/item.html?itemID=2249171157&wfr=wxp_wxh5&ifr=itemdetail&spider_token=3113&spider=seller.zx-shopdetail.5.3
本書作為大數(shù)據(jù)人才培養(yǎng)叢書之一,定位于大數(shù)據(jù)挖掘技術(shù)與應(yīng)用。本書系統(tǒng)地介紹了數(shù)據(jù)挖掘算法理論與方法、工具和應(yīng)用,包括經(jīng)典數(shù)據(jù)挖掘算法,大數(shù)據(jù)環(huán)境下常用數(shù)據(jù)挖掘算法的優(yōu)化,大數(shù)據(jù)新常態(tài)下催生的數(shù)據(jù)分析方法(如推薦系統(tǒng)、鏈接分析與網(wǎng)頁(yè)排序、互聯(lián)網(wǎng)信息抽取、日志挖掘與查詢分析)、工具與應(yīng)用。
5.《深度學(xué)習(xí)》
購(gòu)買鏈接:
https://weidian.com/item.html?itemID=2249171605&wfr=wxp_wxh5&ifr=itemdetail&spider_token=82cb&spider=seller.zx-shopdetail.5.2
本書從深度學(xué)習(xí)的發(fā)展歷史入手,系統(tǒng)地介紹了深度學(xué)習(xí)的基本概念、數(shù)學(xué)基礎(chǔ)和主流模型,夯實(shí)讀者理論基礎(chǔ)。同時(shí),針對(duì)當(dāng)前流行的主流框架,循序漸進(jìn),一步一步引導(dǎo)讀者了解深度學(xué)習(xí)的使用過程,增強(qiáng)動(dòng)手能力。在此基礎(chǔ)上,通過具體例子介紹深度學(xué)習(xí)在圖像、語音、文本中的應(yīng)用,還簡(jiǎn)要介紹了增強(qiáng)學(xué)習(xí)、遷移學(xué)習(xí),深度學(xué)習(xí)硬件實(shí)現(xiàn)等前沿方面,擴(kuò)展深度學(xué)習(xí)的內(nèi)容。每章都附有相應(yīng)的習(xí)題和參考文獻(xiàn),以便感興趣的讀者進(jìn)一步深入思考。“讓學(xué)習(xí)變得輕松”是本書的基本編寫理念。
6.《大數(shù)據(jù)可視化》
購(gòu)買鏈接:
https://weidian.com/item.html?itemID=2249170246&wfr=wxp_wxh5&ifr=itemdetail&spider_token=1174&spider=seller.zx-shopdetail.5.4
本書是針對(duì)當(dāng)前大數(shù)據(jù)應(yīng)用、可視化分析研究和應(yīng)用的新形勢(shì),專門為大數(shù)據(jù)專業(yè)本科生編寫的大數(shù)據(jù)可視化教材。本書詮釋了大數(shù)據(jù)可視化的內(nèi)涵與外延,詳細(xì)介紹了大數(shù)據(jù)可視化概述、可視化的類型與模型、數(shù)據(jù)可視化基礎(chǔ)、數(shù)據(jù)可視化的常用方法、大數(shù)據(jù)可視化的關(guān)鍵技術(shù)、可視化交互、大數(shù)據(jù)可視化工具、大數(shù)據(jù)可視化系統(tǒng)及大數(shù)據(jù)可視化的行業(yè)案例等內(nèi)容。為了便于學(xué)習(xí),每章都附有習(xí)題,題型設(shè)計(jì)也充分考慮到大數(shù)據(jù)可視化課程教學(xué)的需要。
7.《虛擬化與容器》
《虛擬化與容器》介紹了從虛擬化技術(shù)到容器技術(shù)發(fā)展的歷史必然性及其發(fā)展趨勢(shì)。其中,針對(duì)虛擬化技術(shù)詳細(xì)闡述了包括計(jì)算、存儲(chǔ)及網(wǎng)絡(luò)虛擬化技術(shù)的原理、架構(gòu)及相關(guān)案例;針對(duì)容器技術(shù)詳細(xì)闡述了容器技術(shù)內(nèi)核原理,以及Docker、LXC和Kubernetes容器技術(shù)核心原理及相關(guān)案例。
8.《大數(shù)據(jù)實(shí)驗(yàn)手冊(cè)》
購(gòu)買鏈接:
https://weidian.com/item.html?itemID=2082605120&wfr=wxp_wxh5&ifr=itemdetail&spider_token=9b12&spider=seller.zx-shopdetail.5.6
本書針對(duì)高校大數(shù)據(jù)相關(guān)專業(yè)實(shí)踐教學(xué)以及個(gè)人提升大數(shù)據(jù)動(dòng)手能力的需求,由劉鵬教授帶領(lǐng)大數(shù)據(jù)研發(fā)團(tuán)隊(duì),經(jīng)過反復(fù)實(shí)踐、提煉和驗(yàn)證而成。本書主要內(nèi)容包括HDFS實(shí)驗(yàn)、YARN實(shí)驗(yàn)、MapReduce實(shí)驗(yàn)、Hive實(shí)驗(yàn)、Spark實(shí)驗(yàn)、ZooKeeper實(shí)驗(yàn)、HBase實(shí)驗(yàn)、Storm實(shí)驗(yàn)、MongoDB實(shí)驗(yàn)、LevelDB實(shí)驗(yàn)、Mahout實(shí)驗(yàn)和綜合實(shí)戰(zhàn)等。每個(gè)實(shí)驗(yàn)呈現(xiàn)詳細(xì)的實(shí)驗(yàn)?zāi)康?、?shí)驗(yàn)內(nèi)容、實(shí)驗(yàn)原理和實(shí)驗(yàn)流程。本書實(shí)驗(yàn)均在大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)(https://bd.cstor.cn)和BDRack大數(shù)據(jù)實(shí)驗(yàn)一體機(jī)上驗(yàn)證通過。
9.《實(shí)戰(zhàn)Hadoop2.0——從云計(jì)算到大數(shù)據(jù)》
購(gòu)買鏈接:
https://weidian.com/item.html?itemID=1868795615&wfr=wxp_wxh5&ifr=itemdetail&spider_token=b99b&spider=seller.zx-shopdetail.5.10
本書是劉鵬教授主編的Hadoop編程書籍《實(shí)戰(zhàn)Hadoop》的第二版。Hadoop堪稱業(yè)界經(jīng)典的開源云計(jì)算和大數(shù)據(jù)平臺(tái)軟件。本書系統(tǒng)介紹了Hadoop2.0生態(tài)圈的核心和擴(kuò)展組件,包括:管理工具Ambari、分布式文件系統(tǒng)HDFS、分布式資源管理器YARN、分布式并行處理MapReduce、內(nèi)存型計(jì)算框架Spark、數(shù)據(jù)流實(shí)時(shí)處理系統(tǒng)Storm、分布式鎖服務(wù)ZooKeeper、分布式數(shù)據(jù)庫(kù)HBase、數(shù)據(jù)倉(cāng)庫(kù)工具Hive,以及Pig、Oozie、Flume、Mahout等。
目前,上述針對(duì)本科編寫的大數(shù)據(jù)系列教材已經(jīng)基本完成出版,而為高職院校“大數(shù)據(jù)技術(shù)與應(yīng)用”專業(yè)編寫的專科教材也將在今年陸續(xù)出版。
大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)
大數(shù)據(jù)專業(yè)教學(xué)注重實(shí)操性,為此,在教材體系之外,云創(chuàng)團(tuán)隊(duì)針對(duì)大數(shù)據(jù)教學(xué)實(shí)訓(xùn)中的實(shí)驗(yàn)環(huán)境薄弱、師資力量不足以及缺少實(shí)驗(yàn)數(shù)據(jù)等問題,自主研發(fā)了BDRack大數(shù)據(jù)實(shí)驗(yàn)一體機(jī)及其在線服務(wù)版——大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)(http://bd.cstor.cn/)。
大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)采用Docker容器技術(shù),通過少量機(jī)器虛擬出大量的實(shí)驗(yàn)機(jī)器,可供學(xué)生同時(shí)擁有Hadoop、Spark、Python語言、R語言等多套集群進(jìn)行基礎(chǔ)實(shí)驗(yàn)。
基于Docker容器技術(shù),可瞬間創(chuàng)建隨時(shí)運(yùn)行的實(shí)驗(yàn)環(huán)境
使用幾臺(tái)機(jī)器即可虛擬出大量實(shí)驗(yàn)集群,方便上百學(xué)生同時(shí)使用
采用Mesos+ZooKeeper+Mrathon架構(gòu)管理集群,實(shí)驗(yàn)集群相互隔離
實(shí)驗(yàn)環(huán)境互不干擾,如果實(shí)驗(yàn)環(huán)境破壞,一鍵重啟即可建立新集群
內(nèi)置數(shù)據(jù)挖掘等教學(xué)實(shí)驗(yàn)數(shù)據(jù),可導(dǎo)入高校各學(xué)科數(shù)據(jù)進(jìn)行教學(xué)、科研
同時(shí),平臺(tái)同步提供教學(xué)組件的安裝、配置以及教學(xué)PPT、實(shí)驗(yàn)手冊(cè)、實(shí)驗(yàn)數(shù)據(jù)、教學(xué)視頻等具體應(yīng)用與服務(wù),為完成大數(shù)據(jù)與云計(jì)算實(shí)驗(yàn)搭建一站式的集成環(huán)境。
針對(duì)各項(xiàng)實(shí)驗(yàn)所需,大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)配套提供說明實(shí)驗(yàn)?zāi)康?、?shí)驗(yàn)內(nèi)容、實(shí)驗(yàn)代碼的實(shí)驗(yàn)手冊(cè)(85個(gè)實(shí)驗(yàn))以及實(shí)驗(yàn)數(shù)據(jù)與課程視頻,內(nèi)容涵蓋大數(shù)據(jù)集群環(huán)境與大數(shù)據(jù)核心組件等技術(shù)前沿,詳細(xì)的實(shí)驗(yàn)操作流程大大降低了大數(shù)據(jù)實(shí)驗(yàn)門檻。具體實(shí)驗(yàn)手冊(cè)大綱如下。
2017年12月,平臺(tái)在1.0版本的基礎(chǔ)上于推出了2.0版本,不僅實(shí)驗(yàn)數(shù)量增至85個(gè),同時(shí)實(shí)驗(yàn)平臺(tái)優(yōu)化了從創(chuàng)建環(huán)境-實(shí)驗(yàn)操作-提交報(bào)告-教師打分的實(shí)驗(yàn)流程,新增了具有海量題庫(kù)、試卷生成、在線考試、輔助評(píng)分等應(yīng)用的考試系統(tǒng),集成了上傳數(shù)據(jù)-指定列表-選擇算法-數(shù)據(jù)展示的數(shù)據(jù)挖掘及可視化工具。
目前,通過大數(shù)據(jù)實(shí)驗(yàn)平臺(tái),云創(chuàng)大數(shù)據(jù)與西北工業(yè)大學(xué)正合作共建大數(shù)據(jù)聯(lián)合實(shí)驗(yàn)室。同時(shí),大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)已經(jīng)在鄭州大學(xué)、成都理工大學(xué)、重慶師范大學(xué)、金陵科技學(xué)院、天津農(nóng)學(xué)院、鄭州升達(dá)經(jīng)貿(mào)管理學(xué)院、信陽師范學(xué)院、西京學(xué)院、鎮(zhèn)江高等職業(yè)技術(shù)學(xué)校、新疆電信、軟通動(dòng)力等典型用戶單位落地實(shí)施,助其完成了大數(shù)據(jù)教學(xué)科研實(shí)驗(yàn)室的建設(shè)工作。
大數(shù)據(jù)師資培訓(xùn)
2016年末至今,在南京多次舉辦的大數(shù)據(jù)師資培訓(xùn)班,基于大數(shù)據(jù)實(shí)驗(yàn)平臺(tái)提供的實(shí)驗(yàn)環(huán)境以及《大數(shù)據(jù)》教材、《大數(shù)據(jù)實(shí)驗(yàn)手冊(cè)》等指導(dǎo),幫助老師們一步步跑通了Hadoop、Spark等多個(gè)大數(shù)據(jù)實(shí)驗(yàn),使他們跨過了“從理論到實(shí)踐,從知道到用過”的門檻,進(jìn)一步充實(shí)了大數(shù)據(jù)師資力量。
無論是課程體系、綜合實(shí)訓(xùn)平臺(tái),還是師資培養(yǎng)方面,云創(chuàng)大數(shù)據(jù)可以說節(jié)節(jié)開花,厚積薄發(fā),擁有充足的經(jīng)驗(yàn)和優(yōu)勢(shì)資源,在此誠(chéng)摯歡迎廣大高校與云創(chuàng)開展多方面的交流和合作,共同探討與建設(shè)“數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)”專業(yè)。