1、大數(shù)據(jù)實訓室建設(shè)方案建議書杭州華三通信技術(shù)有限公司XXXX年XX月目錄1.大數(shù)據(jù)實訓室建設(shè)背景31.1中國大數(shù)據(jù)產(chǎn)業(yè)空間高速增長31.2大數(shù)據(jù)人才緊缺31.3教學中存在的問題41.4大數(shù)據(jù)人才就業(yè)方向52.H3C大數(shù)據(jù)解決方案簡介73.H3C大數(shù)據(jù)實訓室建設(shè)目標104.H3C大數(shù)據(jù)實訓室總體設(shè)計104.1培養(yǎng)方向及目標104.2實訓室方案設(shè)計114.3大數(shù)據(jù)實訓室建設(shè)思路124.4實驗平臺建設(shè)原則124.5實驗平臺教材大綱144.6實訓室課程目標154.7學員能力要求155.實訓室室的相關(guān)服務(wù)155.1華三培訓中心介紹155.2師資培訓175.3新技術(shù)、新應(yīng)用定期交流175.4實驗室設(shè)備維護服

2、務(wù)181. 大數(shù)據(jù)實訓室建設(shè)背景1.1 中國大數(shù)據(jù)產(chǎn)業(yè)空間高速增長2015 年 9 月 5 日，國務(wù)院印發(fā)促進大數(shù)據(jù)發(fā)展行動綱要。綱要首次從國家層面認定數(shù)據(jù)是國家基礎(chǔ)性戰(zhàn)略資源，將大數(shù)據(jù)行業(yè)定位到國家戰(zhàn)略層面，大數(shù)據(jù)成為推動經(jīng)濟轉(zhuǎn)型發(fā)展的新動力，成為重塑國家競爭優(yōu)勢的新機遇，成為提升政府治理能力的新途徑。 大數(shù)據(jù)發(fā)展，打破信息孤島是關(guān)鍵。綱要指出，要加強頂層設(shè)計和統(tǒng)籌規(guī)劃，形成公共數(shù)據(jù)資源合理適度開放共享的法規(guī)制度和政策體系。2018 年底前，建成國家政府數(shù)據(jù)統(tǒng)一開放平臺。2020年底前，逐步實現(xiàn)信用、交通、醫(yī)療等領(lǐng)域的政府數(shù)據(jù)集向社會開放。目前，信息孤島問題依然是阻礙大數(shù)據(jù)前行的關(guān)鍵要素。目

3、前，60%的主管部門認為數(shù)據(jù)分布和共享存在難題，這源于不同部門間數(shù)據(jù)開放標準的不統(tǒng)一，以及在早期建設(shè)中各自獨立進行和外包導致數(shù)據(jù)格式標準等的不同。因而建立數(shù)據(jù)統(tǒng)一平臺的前提就是打破信息孤島，實現(xiàn)數(shù)據(jù)共享，這對于行業(yè)發(fā)展至關(guān)重要。 大數(shù)據(jù)行業(yè)空間將逐步釋放。綱要提出，到 2020 年，我國將形成一批具有國際競爭力的大數(shù)據(jù)處理、分析、可視化軟件和硬件支撐平臺等產(chǎn)品；并且培育 10 家國際領(lǐng)先的大數(shù)據(jù)核心龍頭企業(yè)，500家大數(shù)據(jù)應(yīng)用、服務(wù)和產(chǎn)品制造企業(yè)。相關(guān)內(nèi)容以及時間節(jié)點表明大數(shù)據(jù)產(chǎn)業(yè)行業(yè)空間將逐步加速釋放。2014 年全球大數(shù)據(jù)產(chǎn)業(yè)對 GDP 貢獻約 270 億美元，行業(yè)尚處于幼稚階段。我國 2

4、014 年大數(shù)據(jù)產(chǎn)業(yè)市場約 80億RMB，這一數(shù)據(jù)正以接近年 30%的速度增長。1.2 大數(shù)據(jù)人才緊缺當下，大數(shù)據(jù)的趨勢已逐步從概念走向落地，而在IT人跟隨大數(shù)據(jù)浪潮的轉(zhuǎn)型中，各大企業(yè)對大數(shù)據(jù)高端人才的需求也越來越緊迫。這一趨勢，也給想要從事大數(shù)據(jù)方面工作的人員提供了難得的職業(yè)機遇。伴隨移動互聯(lián)網(wǎng)、智能終端、云計算、物聯(lián)網(wǎng)技術(shù)的發(fā)展，數(shù)據(jù)呈現(xiàn)爆炸式增長，大數(shù)據(jù)時代正向我們逐步展開一場意義深遠的數(shù)據(jù)革命，對全球整合經(jīng)濟時代的業(yè)務(wù)和服務(wù)產(chǎn)生深遠的影響。大數(shù)據(jù)已經(jīng)不再局限于技術(shù)領(lǐng)域，而是已經(jīng)成為組織機構(gòu)一項優(yōu)先考慮的技術(shù)創(chuàng)新，因為它除了能夠應(yīng)對長期存在的業(yè)務(wù)挑戰(zhàn)之外，大數(shù)據(jù)還為流程、組織、整個行業(yè)、

5、甚至社會本身的轉(zhuǎn)型激發(fā)了許多新的方式。國內(nèi)各行業(yè)也都在積極投身到大數(shù)據(jù)應(yīng)用的浪潮中，迎接“互聯(lián)網(wǎng)+”帶給我們的機遇和挑戰(zhàn)。在大數(shù)據(jù)時代，企業(yè)之間正在為了吸引并留住大數(shù)據(jù)專業(yè)人才而展開競爭，不論是拓展大數(shù)據(jù)業(yè)務(wù)的百度、阿里、奇虎360等互聯(lián)網(wǎng)公司，還是專業(yè)提供數(shù)據(jù)服務(wù)的大數(shù)據(jù)服務(wù)商，以及擁有大量數(shù)據(jù)的傳統(tǒng)行業(yè)，對專業(yè)大數(shù)據(jù)人才都有著迫切的需求。據(jù)專業(yè)機構(gòu)的調(diào)查預(yù)測，中國未來3-5年內(nèi)的大數(shù)據(jù)人才需求總量將達到180萬人，目前的人才缺口現(xiàn)狀至少有150萬人。在國家中長期教育改革和發(fā)展規(guī)劃綱要中，教育信息化首次被納入國家信息化發(fā)展整體戰(zhàn)略，它的重要意義被提升到前所未有的高度。教育信息化已經(jīng)開始為支撐

6、學校的整體發(fā)展戰(zhàn)略提供保障，并成為提升高校核心競爭力的重要手段。1.3 教學中存在的問題“知己知彼，百戰(zhàn)百勝“，培養(yǎng)社會需求的人才，首要是了解目前的教學中存在的問題，從這些問題著手進行分析，得出結(jié)論，并有針對性的進行教學改革，當前，教學中大體有如下5個問題急需解決：1. 院校教學目標界定不清，無法滿足“零距離”上崗的要求，很多學生在院校學習了IT相關(guān)的基礎(chǔ)課程，但進入工作崗位后仍需要到專門的培訓機構(gòu)進行培訓后方可上崗。2. 教材內(nèi)容嚴重與所學專業(yè)脫節(jié)，教材中的知識已經(jīng)滿足不了當前行業(yè)的需求。如果更換教材，那么院校需要重新進行課程建設(shè)，而且還牽扯到課程體系建設(shè)，課程研發(fā)的問題，此類方式受各方面原

7、因的影響無法實施。3. 師資力量薄弱，當前院校進行教學規(guī)劃時，被一個硬指標制約著師資水平。但是，網(wǎng)絡(luò)技術(shù)行業(yè)發(fā)展十分迅速，院校教師又無法及時的了解到當前最前沿的網(wǎng)絡(luò)技術(shù)。4. 實踐環(huán)節(jié)重視不夠，學生動手能力明顯不足，網(wǎng)絡(luò)技術(shù)專業(yè)是典型的理論與實踐結(jié)合的專業(yè)，學生光學不練，無法滿足用人單位的需求。5. 校企合作力度不足，院校培養(yǎng)的畢業(yè)生最終要實現(xiàn)就業(yè)，接口單位就是用人公司。那么用人公司是最有權(quán)威提供其就業(yè)條件的機構(gòu)，校企合作是提升人才培養(yǎng)效果的最佳實踐。新型實訓室的建立，將會涉及相關(guān)課程教學方法與模式的改革，以及虛擬化、云計算和大數(shù)據(jù)等前沿技術(shù)的研究與開發(fā)，有力推進教學研究和教學改革工作的開展，

8、促進校企合作、教學研究論文的發(fā)表與專利的申請。先進的實驗環(huán)境也為學生提供了良好的科技創(chuàng)新和學科競賽的環(huán)境與氛圍。1.4 大數(shù)據(jù)人才就業(yè)方向在“互聯(lián)網(wǎng)+”戰(zhàn)略之下，互聯(lián)網(wǎng)行業(yè)高速發(fā)展，百度、新浪、阿里、騰訊等大型互聯(lián)網(wǎng)公司以及大眾創(chuàng)業(yè)，萬眾創(chuàng)新的創(chuàng)業(yè)型公司都在部署各自的大數(shù)據(jù)戰(zhàn)略，大數(shù)據(jù)相關(guān)人才十分亟需，同時互聯(lián)網(wǎng)、政府、金融、電力等各企事業(yè)單位信息化部署都在向大數(shù)據(jù)全面轉(zhuǎn)型，大數(shù)據(jù)行業(yè)畢業(yè)生作為服務(wù)區(qū)域經(jīng)濟IT行業(yè)和企事業(yè)單位發(fā)展的重要力量大數(shù)據(jù)需要以下六類人才：1. 大數(shù)據(jù)系統(tǒng)研發(fā)工程師。這一專業(yè)人才負責大數(shù)據(jù)系統(tǒng)研發(fā)，包括大規(guī)模非結(jié)構(gòu)化數(shù)據(jù)業(yè)務(wù)模型構(gòu)建、大數(shù)據(jù)存儲、數(shù)據(jù)庫構(gòu)設(shè)、優(yōu)化數(shù)據(jù)庫構(gòu)

9、架、解決數(shù)據(jù)庫中心設(shè)計等，同時，還要負責數(shù)據(jù)集群的日常運作和系統(tǒng)的監(jiān)測等，這一類人才是任何構(gòu)設(shè)大數(shù)據(jù)系統(tǒng)的機構(gòu)都必須的。2. 大數(shù)據(jù)應(yīng)用開發(fā)工程師。此類人才負責搭建大數(shù)據(jù)應(yīng)用平臺以及開發(fā)分析應(yīng)用程序，他們必須熟悉工具或算法、編程、優(yōu)化以及部署不同的MapReduce，他們研發(fā)各種基于大數(shù)據(jù)技術(shù)的應(yīng)用程序及行業(yè)解決方案。其中，ETL開發(fā)者是很搶手的人才，他們所做的是從不同的源頭抽取數(shù)據(jù)，轉(zhuǎn)換并導入數(shù)據(jù)倉庫以滿足企業(yè)的需要，將分散的、異構(gòu)數(shù)據(jù)源中的數(shù)據(jù)如關(guān)系數(shù)據(jù)、平面數(shù)據(jù)文件等抽取到臨時中間層后進行清洗、轉(zhuǎn)換、集成，最后加載到數(shù)據(jù)倉庫，成為聯(lián)機分析處理、數(shù)據(jù)挖掘的基礎(chǔ)，為提取各類型的需要數(shù)據(jù)創(chuàng)造條

10、件。3. 大數(shù)據(jù)分析師。此類人才主要從事數(shù)據(jù)挖掘工作，運用算法來解決和分析問題，讓數(shù)據(jù)顯露出真相，同時，他們還推動數(shù)據(jù)解決方案的不斷更新。隨著數(shù)據(jù)集規(guī)模不斷增大，企業(yè)對Hadoop及相關(guān)的廉價數(shù)據(jù)處理技術(shù)如Hive、HBase、MapReduce、Pig等的需求將持續(xù)增長，具備Hadoop框架經(jīng)驗的技術(shù)人員是最搶手的大數(shù)據(jù)人才，他們所從事的是熱門的分析師工作。4. 數(shù)據(jù)可視化工程師。此類人才負責在收集到的高質(zhì)量數(shù)據(jù)中，利用圖形化的工具及手段的應(yīng)用，清楚地揭示數(shù)據(jù)中的復(fù)雜信息，幫助用戶更好地進行大數(shù)據(jù)應(yīng)用開發(fā)，如果能使用新型數(shù)據(jù)可視化工具如Spotifre，Qlikview和Tableau，那么

11、，就成為很受歡迎的人才。5. 數(shù)據(jù)安全研發(fā)人才。此類人才主要負責企業(yè)內(nèi)部大型服務(wù)器、存儲、數(shù)據(jù)安全管理工作，并對網(wǎng)絡(luò)、信息安全項目進行規(guī)劃、設(shè)計和實施，而對于數(shù)據(jù)安全方面的具體技術(shù)的人才就更需要了，如果數(shù)據(jù)安全技術(shù)，同時又具有較強的管理經(jīng)驗，能有效地保證大數(shù)據(jù)構(gòu)設(shè)和應(yīng)用單位的數(shù)據(jù)安全，那就是搶手的人才。6. 數(shù)據(jù)科學研究人才。數(shù)據(jù)科學研究是一個全新的工作，夠?qū)挝弧⑵髽I(yè)的數(shù)據(jù)和技術(shù)轉(zhuǎn)化為有用的商業(yè)價值，隨著大數(shù)據(jù)時代的到來，越來越多的工作、事務(wù)直接涉及或針對數(shù)據(jù)，這就需要有數(shù)據(jù)科學方面的研究專家來進行研究，通過研究，他們能將數(shù)據(jù)分析結(jié)果解釋給IT部門和業(yè)務(wù)部門管理者聽，數(shù)據(jù)科學專家是聯(lián)通海量數(shù)

12、據(jù)和管理者之間的橋梁，需要有數(shù)據(jù)專業(yè)、分析師能力和管理者的知識，這也是搶手的人才。專業(yè)服務(wù)的職業(yè)崗位及典型工作任務(wù)如下表。崗位典型工作任務(wù)運維大數(shù)據(jù)初級工程師1、 了解storm/cassandra/hbase/spark/hadoop等大數(shù)據(jù)相關(guān)技術(shù)，至少精通一種處理和一種存儲技術(shù)。2、 熟悉Apache Hadoop的部署、性能調(diào)優(yōu)；3、 Linux系統(tǒng)管理工作經(jīng)驗，精通一種或多種Linux Shell語言；大數(shù)據(jù)運維工程師1、 負責大數(shù)據(jù)（Hadoop）的運維和優(yōu)化工作；2、熟悉RDBMS（比如MySQL）的開發(fā)，熟悉SQL語言；3、精通java/c+/python之一開發(fā)大數(shù)據(jù)架構(gòu)師1

13、、 對Hadoop框架有較深的源代碼研究2、 大數(shù)據(jù)分析與數(shù)據(jù)倉庫設(shè)計及開發(fā)經(jīng)驗3、 有良好的數(shù)據(jù)分析及數(shù)據(jù)挖掘能力，可根據(jù)需求定制數(shù)據(jù)處理策略分布式存儲系統(tǒng)軟件開發(fā)工程師1、 精通Java，對數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計有較為深刻的理解，具有良好的分析問題和解決問題的能力2、 對Hadoop框架有較深的源代碼研究，對于HDFS相關(guān)組件有深入了解3、 在開源社群活躍并有積極貢獻者優(yōu)先。分析大數(shù)據(jù)產(chǎn)品經(jīng)理1、 具有數(shù)據(jù)挖掘分析功底2、 通過海量數(shù)據(jù)，挖掘用戶行為，推動技術(shù)團隊，提供數(shù)據(jù)解決方案；3、 了解底層數(shù)據(jù)的架構(gòu)技術(shù)以及應(yīng)用層數(shù)據(jù)分析和算法的基本概念，能夠運用數(shù)據(jù)作為產(chǎn)品解決業(yè)務(wù)方運營及決策問題；大

14、數(shù)據(jù)分析師1、 掌握SAS、SPSS等相關(guān)統(tǒng)計分析軟件2、 精通統(tǒng)計及數(shù)據(jù)挖掘理論3、 掌握基本的市場分析方法和模型，有較強的數(shù)據(jù)分析能力2. H3C大數(shù)據(jù)解決方案簡介H3C DataEngine大數(shù)據(jù)平臺采用Hadoop和MPP分布式數(shù)據(jù)庫混搭的計算框架為用戶提供一套完整的大數(shù)據(jù)平臺解決方案，包括數(shù)據(jù)采集轉(zhuǎn)換、計算存儲、分析挖掘、共享交換、BI展示以及運維管理等全系列功能，幫助用戶構(gòu)建海量數(shù)據(jù)處理系統(tǒng)，發(fā)現(xiàn)數(shù)據(jù)的內(nèi)在價值，獲取新的市場機會。Ø 先進的混合計算架構(gòu)采用Hadoop和MPP融合技術(shù)架構(gòu)，對半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)支持并行計算和低成本存儲，提供低時延、高并發(fā)的查詢和分析功能

15、；對結(jié)構(gòu)化數(shù)據(jù)采用MPP分布式列存儲，支持分布式計算、智能索引等功能，實現(xiàn)高性能結(jié)構(gòu)化數(shù)據(jù)分析處理。集成MapReduce、Spark、Storm、Tez等多種計算框架，利用YARN資源管理做統(tǒng)一管理，可在同一份數(shù)據(jù)集上運行多種計算。離線計算、內(nèi)存計算和流式計算并存，能滿足高吞吐、大數(shù)據(jù)量和低時延實時處理等多方面的數(shù)據(jù)計算要求。Ø 高性價比的分布式集群基于x86服務(wù)器本地的計算與存儲資源，計算集群可以動態(tài)調(diào)整，從數(shù)臺到數(shù)千臺之間彈性擴展，按需構(gòu)建應(yīng)用，減少總體成本；同時，在設(shè)計時充分考慮了硬件設(shè)備的不可靠因素，在軟件層面提供計算和存儲的高可靠保證，具備較強的容錯性。 Ø 云

16、化ETL將不同業(yè)務(wù)系統(tǒng)中分散、零亂、標準不統(tǒng)一的各種源數(shù)據(jù)中的數(shù)據(jù)進行匯聚。支持從DBMS、互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、企業(yè)生產(chǎn)系統(tǒng)等各種數(shù)據(jù)源中提取數(shù)據(jù)。各類數(shù)據(jù)經(jīng)過抽取、清洗和轉(zhuǎn)化后，實現(xiàn)多對多地加載到包含但不限于大數(shù)據(jù)集群和各類關(guān)系型數(shù)據(jù)庫中。該過程由一個統(tǒng)一的操作接口封裝，經(jīng)過無代碼的可視化配置后，可實現(xiàn)自動化地、分布式地執(zhí)行整個ETL作業(yè)流程。Ø 數(shù)據(jù)分層和分級存儲把數(shù)據(jù)按照不同階段分為ODS(Operational Data Store)數(shù)據(jù)、輕度匯總數(shù)據(jù)、信息子層數(shù)據(jù)和應(yīng)用數(shù)據(jù)，分別存儲在Hadoop平臺、MPP分布式數(shù)據(jù)庫和數(shù)據(jù)倉庫，滿足不同階段的計算需求；按照在線數(shù)據(jù)、歷史數(shù)據(jù)

17、等來管理數(shù)據(jù)生命周期，滿足在線數(shù)據(jù)的高性能存儲的需求；將核心模型數(shù)據(jù)通過改造融入到數(shù)據(jù)倉庫的核心模型中，減少數(shù)據(jù)冗余，提升數(shù)據(jù)質(zhì)量；將數(shù)據(jù)倉庫中的歷史數(shù)據(jù)遷移到低成本分布式數(shù)據(jù)庫，減輕數(shù)據(jù)倉庫的計算與存儲壓力并支撐深度數(shù)據(jù)分析。Ø 數(shù)據(jù)分析挖掘支持R語言，集成機器學習算法庫Mahout和Spark MLlib，包含聚類分析、分類算法、頻度關(guān)聯(lián)分析和推薦系統(tǒng)在內(nèi)的常用機器學習算法。滿足批處理統(tǒng)計分析、在線數(shù)據(jù)檢索、R語言數(shù)據(jù)挖掘、實時流處理、全文搜索等全方位需求。可幫助企業(yè)建立高速可擴展的數(shù)據(jù)倉庫和數(shù)據(jù)集市，結(jié)合多種報表工具提供交互式數(shù)據(jù)分析、即時報表和BI可視化展示能力。Ø

18、 數(shù)據(jù)服務(wù)接口提供交互式SQL和可編程API，提取數(shù)據(jù)存儲計算平臺的數(shù)據(jù)處理結(jié)果，屏蔽底層細節(jié)，為上層應(yīng)用提供數(shù)據(jù)服務(wù)。主要包括SQL接口、MapReduce/Spark/Storm計算接口等多種可編程API、全文實時搜索接口、業(yè)務(wù)定向接口、關(guān)聯(lián)查詢接口，滿足數(shù)據(jù)查詢、可視化BI展示、數(shù)據(jù)交換、數(shù)據(jù)分析、目錄服務(wù)、綜合查詢等業(yè)務(wù)應(yīng)用的需要。Ø 可視化運維管理 提供Web圖形化界面實現(xiàn)運集群的管理和監(jiān)控，集群的節(jié)點、主機和服務(wù)的運行狀態(tài)都能在界面上顯示，操作友好，功能豐富。提供集群快速安裝部署、機架展示、用戶權(quán)限管理、主機與服務(wù)管理、監(jiān)控及告警通知等多方面支持，在可管理性方面優(yōu)勢顯著。

19、3. H3C大數(shù)據(jù)實訓室建設(shè)目標Ø 提供先進的教學內(nèi)容及先進的教學方法，提高教學質(zhì)量；Ø 提升專業(yè)教師的技術(shù)水平；Ø 打造大數(shù)據(jù)相關(guān)精品專業(yè)；Ø 共同完善課程系統(tǒng)，聯(lián)合開發(fā)更為實用的大數(shù)據(jù)范疇技術(shù)教材；Ø 完善院校實踐條件，提高學生動手實踐能力；4. H3C大數(shù)據(jù)實訓室總體設(shè)計4.1 培養(yǎng)方向及目標大數(shù)據(jù)人才培養(yǎng)方案是H3C在網(wǎng)絡(luò)學院十周年之際，推出的下一代人才培養(yǎng)計劃。H3C將響應(yīng)國家號召，全力配合各類院校開展大數(shù)據(jù)人才培養(yǎng)工作，H3C大數(shù)據(jù)實訓室方案已就緒，將支持校方植入完整的H3C課程體系，輔助高校全力培養(yǎng)“零距離”上崗，綜合素質(zhì)達到企業(yè)

20、要求的優(yōu)秀畢業(yè)生。H3C大數(shù)據(jù)實訓室為學生制定了循序漸進的能力提升計劃，理論與實驗緊密結(jié)合，培養(yǎng)學生思考、動手能力，助力各個學校進行全流程、全方位、可持續(xù)的創(chuàng)新型大數(shù)據(jù)人才培養(yǎng)。人才培養(yǎng)計劃如下：4.2 實訓室方案設(shè)計實訓室依據(jù)業(yè)務(wù)屬性，共分為3個功能區(qū)：1） 實驗區(qū)：學生學習大數(shù)據(jù)實訓室課程內(nèi)容和實際操作實驗課程的區(qū)域，根據(jù)每組學生數(shù)量配置終端（PC）；2） 實驗設(shè)備區(qū)：放置大數(shù)據(jù)實訓室實驗設(shè)備的區(qū)域，包括服務(wù)器、存儲、網(wǎng)絡(luò)設(shè)備和大數(shù)據(jù)、虛擬化軟件，所有的實驗內(nèi)容均運行在該實驗設(shè)備區(qū)內(nèi)；3） 實驗管理區(qū)：老師管理區(qū)和演示區(qū)，負責演示實驗課程內(nèi)容并對所有實驗組的實驗設(shè)備做監(jiān)控和管理；管理區(qū)亦可

21、作為校內(nèi)大數(shù)據(jù)分析的實驗過渡平臺，將學校數(shù)據(jù)導入該區(qū)域大數(shù)據(jù)集群，根據(jù)業(yè)務(wù)需求進行海量數(shù)據(jù)存儲處理、分析挖掘，為校園大數(shù)據(jù)建設(shè)貢獻力量學生可分為不同實驗小組進行實戰(zhàn)練習，每個小組內(nèi)不超過5人，集群可將計算、存儲資源隔離，使實驗小組件底層隔離，互不影響；教師區(qū)實驗設(shè)備性能較高，除帶領(lǐng)學生實驗外，還可承接校內(nèi)大數(shù)據(jù)集中、應(yīng)用開發(fā)等項目。實驗平臺所需軟硬件如下：Ø 計算節(jié)點：可選用機架或刀片服務(wù)器Ø 存儲節(jié)點：使用計算幾點本地磁盤承載Ø 網(wǎng)絡(luò)設(shè)備：連通整個實驗環(huán)境與校園網(wǎng)絡(luò)，可選二層、三層交換機Ø PC機：教師、學生終端Ø 虛擬化軟件：為學生提供靈活

22、的實驗環(huán)境Ø 大數(shù)據(jù)平臺軟件：為學生提供大數(shù)據(jù)實驗集群4.3 大數(shù)據(jù)實訓室建設(shè)思路為實現(xiàn)建設(shè)目標要求，大數(shù)據(jù)實訓室設(shè)計構(gòu)建中堅持以下設(shè)計原則：第一，高可靠性。大數(shù)據(jù)實驗平臺的穩(wěn)定可靠是實驗正常運行的關(guān)鍵保證，在大數(shù)據(jù)實驗設(shè)備設(shè)計中選用高可靠性產(chǎn)品，合理設(shè)計大數(shù)據(jù)實驗平臺架構(gòu)，制訂可靠的備份策略，保證大數(shù)據(jù)實驗平臺具有故障自愈的能力，最大限度地支持系統(tǒng)的正常運行。第二，標準開放性。選用業(yè)界主流大數(shù)據(jù)處理系統(tǒng)，保證與生態(tài)內(nèi)各組件之間的平滑集成與連接互通，以及將來的擴展；對外提供標準統(tǒng)一API接口。第三，靈活性及可擴展性。根據(jù)未來業(yè)務(wù)的增長和變化，實驗平臺可以平滑地擴充和升級，最大程度地減

23、少對現(xiàn)有實驗平臺的調(diào)整。現(xiàn)有設(shè)備可以在擴容過程中得到充分利用，從而保護用戶現(xiàn)有投資。第四，可管理性。對實驗平臺實行集中監(jiān)測、分權(quán)管理，并統(tǒng)一分配資源管理。選用先進的大數(shù)據(jù)平臺，具有對實驗平臺內(nèi)的虛機資源創(chuàng)建、監(jiān)控、遷移等管理能力。第五，統(tǒng)一標準、統(tǒng)一平臺。大數(shù)據(jù)平臺的建設(shè)要從長遠角度出發(fā)，考慮平臺的擴展能力，采用開放的技術(shù)和國際標準。4.4 實驗平臺建設(shè)原則從在方案設(shè)計思路上，針對大數(shù)據(jù)實驗平臺，我們從以下幾個方面進行深思熟慮的設(shè)計：1.技術(shù)標準開放當前階段大數(shù)據(jù)整個產(chǎn)業(yè)化還不夠成熟，相關(guān)標準還在不斷完善中。目前H3C選用業(yè)界使用最為廣泛的Hadoop作為平臺當中一部分，能夠與生態(tài)內(nèi)各類常用組

24、件無縫對接。此外，為保證方案的前瞻性，設(shè)備的選型應(yīng)充分考慮計算、存儲、網(wǎng)絡(luò)節(jié)點的能力，保證良好的先進性，以適應(yīng)未來的技術(shù)發(fā)展。2.開放接口為保證服務(wù)器、存儲、網(wǎng)絡(luò)等資源能夠被大數(shù)據(jù)平臺良好的調(diào)度與管理，要求系統(tǒng)提供開放的API接口。同時大數(shù)據(jù)平臺也提供開放的API接口，未來可以在這些接口的基礎(chǔ)上進行二次定制開放。 3.豐富、清晰的培訓教材對于實驗室承擔的培訓工作，比如基礎(chǔ)課程的培訓、行業(yè)應(yīng)用培訓，應(yīng)該具有豐富、清晰的教材，包括教師指導書、學員課本和實驗手冊。這樣可以充分提高教學培訓的效率。但是不是所有標準化教材都能滿足所有實驗室，很多學校在承擔特殊化的培訓工作時，往往需要定制開發(fā)教材，這就需要

25、實驗設(shè)備提供商和學校聯(lián)合開發(fā)相應(yīng)的課程。4.師資培訓 新技術(shù)交流雖然多數(shù)科研人員和授課教師都有很深的學術(shù)功底，但是不見得對實驗設(shè)備了解非常深入，這就對科研進度和培訓工作帶來影響。供應(yīng)商在提供實驗設(shè)備的同時應(yīng)該對科研人員和授課教師進行詳細的設(shè)備使用培訓，使他們能夠更好的開展后續(xù)工作。為了使研究、培訓內(nèi)容跟上最新技術(shù)的發(fā)展，應(yīng)當有業(yè)界技術(shù)領(lǐng)先的企業(yè)定期和科研人員、授課教師充分交流前沿技術(shù)的發(fā)展，已達到開拓科研視野、增加企業(yè)產(chǎn)品方案競爭力的雙贏目的。5.權(quán)威認證培訓來到實驗室接受培訓和參加技術(shù)進修的學員，實際上對實驗教學內(nèi)容和實驗設(shè)施比較挑剔的。這是非常現(xiàn)實的，因為每個人都不希望來到實驗室還是學習很

26、多過時的技術(shù)，也不希望學習一些非主流設(shè)備。除了自身技術(shù)技能的提升，另外一個學員關(guān)心的問題是能夠拿到一個非常權(quán)威的、被廣泛認可的能力證明，這對學員個人今后的發(fā)展會有較大促進作用。6.技術(shù)服務(wù)保障雖然實驗室對設(shè)備的可靠性不及電信、金融系統(tǒng)對設(shè)備可靠性要求高，但是如果科研課題進度非常緊，或者學員是付費使用實驗室，那么實驗平臺對可靠性以及廠家對故障的服務(wù)響應(yīng)就非常重要了。另一個維度來講，實驗平臺涉及多種高、精、尖技術(shù)，廠家服務(wù)人員對技術(shù)掌握的深度和范圍也顯得非常必要。4.5 實驗平臺教材大綱課程體系架構(gòu)如下：課程大綱如下：第一篇 大數(shù)據(jù)概述Ø 大數(shù)據(jù)技術(shù)的起源、發(fā)展歷程Ø 大數(shù)據(jù)技

27、術(shù)流派、體系結(jié)構(gòu)Ø 大數(shù)據(jù)典型應(yīng)用、商用案例Ø 大數(shù)據(jù)發(fā)展業(yè)前景第二篇 大數(shù)據(jù)關(guān)鍵技術(shù)Ø Hadoop概術(shù)Ø 分布式計算概述Ø 數(shù)據(jù)分析挖掘算法Ø 數(shù)據(jù)倉庫與商業(yè)智能第三篇 大數(shù)據(jù)應(yīng)用設(shè)計Ø Mapreduce/Spark等編程實踐Ø HDFS/HBase等編程實踐Ø 綜合實訓4.6 實訓室課程目標Ø 掌握大數(shù)據(jù)的基本概念與解決方案。Ø 掌握大數(shù)據(jù)的基礎(chǔ)平臺部署Ø 掌握大數(shù)據(jù)常見計算框架原理及操作Ø 掌握數(shù)據(jù)采集工具使用Ø 掌握常用數(shù)據(jù)分析挖掘算法及使用&

28、#216; 掌握數(shù)據(jù)倉庫與商業(yè)智能理論及使用Ø 掌握大數(shù)據(jù)產(chǎn)品維護4.7 學員能力要求Ø 熟悉windows、Linux業(yè)務(wù)服務(wù)器的配置，維護，監(jiān)控，調(diào)優(yōu)，故障排除等Ø 具備數(shù)據(jù)庫基礎(chǔ)知識，熟悉數(shù)據(jù)庫相關(guān)操作Ø 具備數(shù)學及統(tǒng)計學相關(guān)基礎(chǔ)知識Ø 具備計算機編程能力Ø 具備數(shù)據(jù)結(jié)構(gòu)、算法相關(guān)知識5. 實訓室室的相關(guān)服務(wù)5.1 華三培訓中心介紹H3C培訓中心是H3C公司為客戶、渠道合作伙伴、內(nèi)部員工和社會IT從業(yè)人員提供全系列的網(wǎng)絡(luò)產(chǎn)品培訓和網(wǎng)絡(luò)技術(shù)認證的專業(yè)培訓機構(gòu)，致力于向全球客戶提供高品質(zhì)、全方位的認證培訓服務(wù)。 H3C培訓中心完全繼

29、承了華為網(wǎng)絡(luò)技術(shù)認證培訓體系和資源平臺，同時融合了3Com公司的課程體系，并將充分考慮客戶不同層次的需求，對華為認證培訓體系進行完善和補充，增加行業(yè)解決方案認證培訓和系列網(wǎng)絡(luò)產(chǎn)品的專項認證培訓，全力支持企業(yè)和院校培養(yǎng)優(yōu)秀的網(wǎng)絡(luò)技術(shù)人才，提升員工的工作技能，更好地提升客戶投資的效益，給客戶帶來最大的收益。 H3C培訓中心總部設(shè)在中國北京，在北京、杭州設(shè)立了大型的培訓基地。目前H3C在中國各大中心城市擁有40余家授權(quán)培訓中心(HATC), 120多家H3C網(wǎng)絡(luò)學院（HNC)，并在巴西、德國、埃及等地建立了多個授權(quán)培訓中心和網(wǎng)絡(luò)學院。覆蓋全球的豐富的培訓資源可以為客戶提供大規(guī)模、高質(zhì)量、個性化的專業(yè)

30、培訓服務(wù)，并能夠快速響應(yīng)客戶需求，量身定制客戶化培訓解決方案。已有三十多個國家和地區(qū)的4萬5千余人接受過認證培訓，2萬多人獲得認證證書. 另外H3C培訓中心還擁有一支專門負責課程開發(fā)的專家隊伍。他們深諳職業(yè)教育的特點，精于系統(tǒng)化的課程設(shè)計和開發(fā)，確保所有的培訓項目優(yōu)質(zhì)高效，滿足客戶需求。 H3C培訓中心將產(chǎn)品開發(fā)理念貫穿到課程開發(fā)中，歷經(jīng)市場調(diào)研、設(shè)計、開發(fā)以及教學效果評估等四個階段。課程設(shè)計特別注重學員實際工作能力的提高，課程中高度強調(diào)是實際的上機維護操作、網(wǎng)上案例講解、故障模擬演練，緊密聯(lián)系當前的網(wǎng)上情況，能極大地提高學員的實際操作維護能力。 根據(jù)用戶需要和產(chǎn)品特點，培訓課程采用模塊化的設(shè)

31、計思想，每個課程都有可衡量的培訓目標、具體的培訓內(nèi)容及合理的時長。并且在各種課程的設(shè)置中強調(diào)案例教學，強調(diào)技術(shù)應(yīng)用能力培養(yǎng)，在認證考試中也有相當?shù)膶嶋H配置考察。培訓課程的各模塊也以恰當?shù)臅r序進行組合，以保證最佳的培訓效果。 優(yōu)良的培訓和實驗環(huán)境 H3C培訓中心和全球的培訓合作伙伴均擁有良好的培訓環(huán)境，尤其是實驗環(huán)境，教學用的實驗設(shè)備全部采用華為網(wǎng)絡(luò)產(chǎn)品，培訓設(shè)備選型以主流設(shè)備為主，并及時更新軟件以提供最新特性。學員上機操作占1/3以上課時，實驗過程要求1:1的人機比例，賦以各種解決方案的組網(wǎng)案例，突出實際動手能力和應(yīng)用技能的培養(yǎng)。對于每一個培訓合作伙伴，都有專門的培訓教室，至少擁有兩名通過認證

32、的講師，教材全部采用H3C公司標準認證培訓教材。 5.2 師資培訓專業(yè)的師資隊伍是培訓和教學質(zhì)量的最佳保證。H3C公司極其重視師資隊伍的建設(shè)，當院校建立了H3C大數(shù)據(jù)計算實訓室后，H3C公司將會為學校培訓老師，以充分保證學校大數(shù)據(jù)實訓室的效果和質(zhì)量。師資培訓的內(nèi)容分為三類：一是實驗課程內(nèi)容的培訓，H3C公司對學校的老師進行大數(shù)據(jù)實訓室相關(guān)課程的培訓，以使老師熟悉課程內(nèi)容，徹底掌握H3C產(chǎn)品的配置、維護等必要知識，成為一個專家，通過這些培訓，一方面提高了學校實驗室老師的技術(shù)能力和動手能力，另一方面又能最大限度地發(fā)揮大數(shù)據(jù)實訓室的功能，更好地為學校教學和科研服務(wù)；二是關(guān)于實驗室管理方面的培訓，H3

33、C公司根據(jù)多年來在院校建立實訓室的經(jīng)驗，已總結(jié)出一套行之有效的實驗室管理方法和流程，比如實驗室的設(shè)備管理流程，實驗室上機管理方法和實驗室值班員、管理員守則等一系列規(guī)章制度等，這些經(jīng)驗可以和學校進行共享，使學校根據(jù)這些內(nèi)容迅速地制訂出適合本校實際情況的實驗室管理辦法來，而不用從頭去摸索和掌握，從而促進了大數(shù)據(jù)實訓室的成功運行；三是關(guān)于行業(yè)解決方案的培訓，大數(shù)據(jù)實訓室可以對社會其它行業(yè)進行開放，培訓其它行業(yè)的技術(shù)人員，比如大數(shù)據(jù)實訓室可以招收政府行業(yè)的學員，開展關(guān)于政府內(nèi)部數(shù)據(jù)大集中、海量數(shù)據(jù)分析挖掘的培訓，另外，對學校內(nèi)部學生的培訓，也有需要模擬其它行業(yè)數(shù)據(jù)處理實際環(huán)境，這就需要學校的老師對各行各業(yè)的網(wǎng)絡(luò)解決方案非常熟悉，才能順利地開展這些培訓。H3C公司積累了各個行業(yè)的客戶群體，對各行各業(yè)的網(wǎng)絡(luò)有著深刻的認識和獨到的見解，可以根據(jù)學校的要求進行行業(yè)解決方案的培訓，以使學校老師掌握迅速掌握各行業(yè)的網(wǎng)絡(luò)特點，更好地為教學、社會培訓服務(wù)。5.3 新技術(shù)、新應(yīng)用定期交流IT行業(yè)是不斷變化和發(fā)展的，不斷地有新技術(shù)、新應(yīng)用、新產(chǎn)品出現(xiàn)，H3C公司作為業(yè)界領(lǐng)先的IT廠商，可通過定期、不定期資料發(fā)放，