《大數(shù)據(jù)技術(shù)實戰(zhàn)案例教程ISBN978-7-5606-6679-2》授課計劃編寫者：徐魯輝******教師授課計劃20**—20**學(xué)年第*學(xué)期課程名稱：大數(shù)據(jù)技術(shù)原理及應(yīng)用課程性質(zhì)：************編寫教師：******職稱：******總學(xué)時：48其中理論學(xué)時：32實驗學(xué)時：16其它學(xué)時：0考核方式：考試教材名稱：大數(shù)據(jù)技術(shù)實戰(zhàn)案例教程主編：徐魯輝出版社：西安電子科技大學(xué)出版社適用專業(yè)、年級：******專業(yè)****級要求：1.授課計劃由教研室主任（團隊負責人）召集相關(guān)主講教師集體研究后編寫；2.每個授課單元（2學(xué)時）的內(nèi)容占一格，表格不夠可另加附頁；3.任課教師須嚴格按授課計劃教學(xué)，進度提前或推遲超過4學(xué)時視為教學(xué)事故；4.“講課”、“實驗”、“其它”的填寫，應(yīng)在相應(yīng)欄畫“√”，如果有其它教學(xué)內(nèi)容必須在備注欄進一步說明；“課程性質(zhì)”填寫公共必修課程、公共選修課程、數(shù)學(xué)與自然科學(xué)類課程、工程基礎(chǔ)類課程、專業(yè)基礎(chǔ)類課程、專業(yè)必修課程、專業(yè)方向課程、專業(yè)選修課程、專業(yè)實踐環(huán)節(jié)等。5.授課計劃經(jīng)審核后使用，報院系教務(wù)科備案，授課教師人手一份。教研室主任簽字:學(xué)院(中心)負責人簽字:教學(xué)單位蓋章序號周周課次講課實驗其它教學(xué)內(nèi)容備注（如課堂討論、習(xí)題等）章節(jié)（章節(jié)名稱、教學(xué)內(nèi)容提要、實驗的名稱、課堂討論的題目）111√11.1-1.3開學(xué)第一課1.自我介紹2.課程地位、先修及后續(xù)課程3.教學(xué)目標及知識圖譜4.課時分配（理論+實驗）及進度、教材、參考資料、上機軟件5.考核方式：平時+實驗+期末6.學(xué)堂云、雨課堂使用方法第1章部署全分布模式Hadoop集群1.1初識Hadoop1.2Hadoop生態(tài)系統(tǒng)1.3Hadoop體系架構(gòu)頭腦風暴，問卷調(diào)查，在線測試Linux、Java、Python、數(shù)據(jù)庫等先修知識212√11.4第1章部署全分布模式Hadoop集群1.4Hadoop部署要點1.4.1Hadoop運行環(huán)境1.4.2Hadoop運行模式1.4.3Hadoop配置文件章節(jié)測試1預(yù)習(xí)實驗1指導(dǎo)書，自行實踐部署Hadoop集群321√11.5實驗1部署全分布模式Hadoop集群實驗報告1431√22.1-2.3第2章實戰(zhàn)HDFS2.1初識HDFS2.2HDFS體系架構(gòu)2.3HDFS文件存儲原理2.3.1數(shù)據(jù)塊Block2.3.2副本存放策略2.3.3數(shù)據(jù)讀取2.3.4數(shù)據(jù)寫入532√22.4-2.5第2章HDFS實戰(zhàn)2.4HDFS接口2.4.1HDFSWebUI2.4.2HDFSShell2.4.3HDFSJavaAPI2.5HDFS高可靠性機制2.5.1HDFSNameNodeHA高可用機制2.5.2HDFSNameNodeFederation聯(lián)邦機制章節(jié)測試2641√22.6實驗2HDFS實戰(zhàn)實驗報告2751√33.1-3.3第3章MapReduce編程3.1初識MapReduce3.2MapReduce作業(yè)執(zhí)行流程3.3MapReduce入門案例WordCount剖析3.3.1TokenizerMapper類3.3.2IntSumReducer類3.3.3main()函數(shù)3.3.4向Hadoop集群提交并運行WordCount852√33.4-3.5第3章MapReduce編程3.4MapReduce數(shù)據(jù)類型3.5MapReduce接口3.5.1MapReduceWebUI3.5.2MapReduceShell3.5.3MapReduceJavaAPI章節(jié)測試3961√33.6實驗3MapReduce編程實驗報告31071√44.1-4.3第4章部署ZooKeeper集群和ZooKeeper實戰(zhàn)4.1初識ZooKeeper4.2ZooKeeper工作原理4.3ZooKeeper數(shù)據(jù)模型1172√44.4-4.5第4章部署ZooKeeper集群和ZooKeeper實戰(zhàn)4.4ZooKeeper部署要點4.4.1ZooKeeper運行環(huán)境4.4.2ZooKeeper運行模式4.4.3ZooKeeper配置文件4.5ZooKeeper接口4.5.1ZooKeeper四字命令4.5.2ZooKeeperShell4.5.3ZooKeeperJavaAPI章節(jié)測試41281√44.6實驗4部署ZooKeeper集群和ZooKeeper實戰(zhàn)實驗報告41391√55.1-5.5第5章部署本地模式Hive和Hive實戰(zhàn)5.1初識Hive5.2Hive體系架構(gòu)5.3Hive數(shù)據(jù)類型5.4Hive數(shù)據(jù)模型5.5Hive函數(shù)1492√55.6-5.7第5章部署本地模式Hive和Hive實戰(zhàn)5.6Hive部署要點5.6.1Hive運行環(huán)境5.6.2Hive部署模式5.6.3Hive配置文件5.7Hive接口5.7.1HiveShell5.7.2HiveWebInterface（HWI）5.7.3HiveAPI章節(jié)測試515101√55.8實驗5部署本地模式Hive和Hive實戰(zhàn)實驗報告516111√66.1-6.3第6章Flume實戰(zhàn)6.1初識Flume6.2Flume體系架構(gòu)6.3Flume部署要點6.3.1Flume運行環(huán)境6.3.2Flume運行模式6.3.3Flume配置文件17112√66.4第6章Flume實戰(zhàn)6.4FlumeShell常用命令章節(jié)測試618121√66.5實驗6Flume實戰(zhàn)實驗報告619131√77.1-7.3第7章Kafka實戰(zhàn)7.1初識Kafka7.2Kafka體系架構(gòu)7.3Kafka部署要點7.3.1Kafka運行環(huán)境7.3.2Kafka運行模式7.3.3Kafka配置文件20132√77.4第7章Kafka實戰(zhàn)7.4KafkaShell常用命令章節(jié)測試721141√77.5實驗7Kafka實戰(zhàn)實驗報告722151√88.1-8.4第8章Spark集群部署和基本編程8.1初識Spark8.1.1Spark簡介8.1.2Spark對比HadoopMapReduce8.2Spark生態(tài)系統(tǒng)8.3Spark運行架構(gòu)8.4RDD的設(shè)計與操作8.4.1RDD簡介8.4.2RDD數(shù)據(jù)存儲模型8.4.3RDD創(chuàng)建8.4.4RDD操作23152√88.5-8.6第8章Spark集群部署和基本編程8.5Spark部署要點8.5.1Sp