>>資料轉(zhuǎn)換管理系統(tǒng)(DataManagement，ETL) V4.0集團(tuán)大數(shù)據(jù)平臺(tái)建設(shè)項(xiàng)目人員培訓(xùn)方案我方嚴(yán)格按照集團(tuán)的要求，向業(yè)務(wù)和技術(shù)團(tuán)隊(duì)提供相應(yīng)培訓(xùn)，具體培訓(xùn)實(shí)施要求包括：（1）制定詳細(xì)的項(xiàng)目培訓(xùn)計(jì)劃根據(jù)項(xiàng)目安排和進(jìn)度，預(yù)先制定詳細(xì)的項(xiàng)目培訓(xùn)計(jì)劃，包括：a）確定項(xiàng)目培訓(xùn)時(shí)間;b）確定項(xiàng)目培訓(xùn)內(nèi)容;c）確定講師名單;d）確定集團(tuán)方參與培訓(xùn)人員角色。（2）確定項(xiàng)目培訓(xùn)資料根據(jù)項(xiàng)目培訓(xùn)計(jì)劃，預(yù)先就項(xiàng)目培訓(xùn)內(nèi)容準(zhǔn)備培訓(xùn)資料，并在與集團(tuán)有關(guān)人員充分溝通后確定項(xiàng)目培訓(xùn)資料。（3）保證項(xiàng)目培訓(xùn)效果我方嚴(yán)格按照項(xiàng)目培訓(xùn)計(jì)劃為集團(tuán)提供項(xiàng)目培訓(xùn)（經(jīng)雙方建議或同意更改的項(xiàng)目培訓(xùn)計(jì)劃除外），保證為項(xiàng)目培訓(xùn)提供充分的時(shí)間和人力資源保障，確保項(xiàng)目的最終培訓(xùn)效果。Hadoop系統(tǒng)培訓(xùn)我方專門為集團(tuán)管理層、關(guān)鍵用戶和相關(guān)技術(shù)骨干開(kāi)展大數(shù)據(jù)、Hadoop系統(tǒng)和業(yè)務(wù)領(lǐng)域的概覽性培訓(xùn)，使其理解實(shí)施大數(shù)據(jù)帶來(lái)的變革影響及意義，能順利開(kāi)展相關(guān)業(yè)務(wù)領(lǐng)域的支持工作。培訓(xùn)包含如下內(nèi)容：大數(shù)據(jù)和大數(shù)據(jù)發(fā)展趨勢(shì)；大數(shù)據(jù)生態(tài)圈以及原理構(gòu)架課程；大數(shù)據(jù)技術(shù)與數(shù)據(jù)分析基礎(chǔ)知識(shí)；大數(shù)據(jù)應(yīng)用案例；計(jì)劃安排兩輪培訓(xùn)，每輪3天，每輪不少于50人，即滿足總?cè)藬?shù)不少于100人，每人不少于3天的要求。此培訓(xùn)主要由軟件原廠商星環(huán)科技提供。具體課程安排如下：表17-1Hadoop系統(tǒng)培訓(xùn)課程表培訓(xùn)類型培訓(xùn)課程培訓(xùn)時(shí)間培訓(xùn)內(nèi)容簡(jiǎn)介基礎(chǔ)培訓(xùn)大數(shù)據(jù)和大數(shù)據(jù)發(fā)展趨勢(shì)0.5天什么是大數(shù)據(jù)？大數(shù)據(jù)發(fā)展趨勢(shì)基礎(chǔ)培訓(xùn)大數(shù)據(jù)生態(tài)圈以及原理構(gòu)架課程0.5天包含下列內(nèi)容：ApacheHadoop的發(fā)展歷史ApacheHadoop生態(tài)系統(tǒng)HDFS技術(shù)原理、HDFS基本操作和編程Map/Reduce基礎(chǔ)集群架構(gòu)基礎(chǔ)培訓(xùn)大數(shù)據(jù)技術(shù)與數(shù)據(jù)分析基礎(chǔ)知識(shí)1天針對(duì)系統(tǒng)功能，進(jìn)行數(shù)據(jù)處理和數(shù)據(jù)分析；基礎(chǔ)培訓(xùn)大數(shù)據(jù)應(yīng)用案例1天應(yīng)用案例培訓(xùn)業(yè)務(wù)使用培訓(xùn)我方專門為業(yè)務(wù)人員開(kāi)展業(yè)務(wù)操作相關(guān)培訓(xùn)，使其能熟練操作基于Hadoop系統(tǒng)實(shí)現(xiàn)的業(yè)務(wù)功能。培訓(xùn)包含如下內(nèi)容：大數(shù)據(jù)和Hadoop簡(jiǎn)介；集團(tuán)大數(shù)據(jù)平臺(tái)介紹；集團(tuán)大數(shù)據(jù)平臺(tái)業(yè)務(wù)使用詳細(xì)培訓(xùn)；集團(tuán)大數(shù)據(jù)平臺(tái)業(yè)務(wù)應(yīng)用案例；計(jì)劃安排兩輪培訓(xùn)，每輪7天，每輪不少于100人，即滿足人數(shù)不少于200人，每人不少于7天的要求。具體課程安排如下：表17-2業(yè)務(wù)使用培訓(xùn)課程表培訓(xùn)類型培訓(xùn)課程培訓(xùn)時(shí)間培訓(xùn)內(nèi)容簡(jiǎn)介基礎(chǔ)培訓(xùn)大數(shù)據(jù)和Hadoop簡(jiǎn)介1天什么是大數(shù)據(jù)？Hadoop功能特點(diǎn)。基礎(chǔ)培訓(xùn)集團(tuán)大數(shù)據(jù)平臺(tái)介紹1天大數(shù)據(jù)平臺(tái)建設(shè)目標(biāo)、建設(shè)思路、建設(shè)方法、架構(gòu)設(shè)計(jì)。基礎(chǔ)培訓(xùn)集團(tuán)大數(shù)據(jù)平臺(tái)業(yè)務(wù)使用詳細(xì)培訓(xùn)3天如何使用集團(tuán)大數(shù)據(jù)平臺(tái)各項(xiàng)功能；基礎(chǔ)培訓(xùn)集團(tuán)大數(shù)據(jù)平臺(tái)業(yè)務(wù)應(yīng)用案例2天應(yīng)用大數(shù)據(jù)平臺(tái)進(jìn)行業(yè)務(wù)，推動(dòng)發(fā)展的應(yīng)用案例培訓(xùn)分析挖掘培訓(xùn)我方專門為數(shù)據(jù)分析人員提供數(shù)據(jù)分析挖掘培訓(xùn)，使其能熟練運(yùn)用Hadoop系統(tǒng)開(kāi)展數(shù)據(jù)分析挖掘工作，能夠按需基于系統(tǒng)（工具）做數(shù)據(jù)分析開(kāi)發(fā)，尤其是對(duì)報(bào)表的定制化開(kāi)發(fā)。培訓(xùn)包含如下內(nèi)容：我方專門為集團(tuán)業(yè)務(wù)分析團(tuán)隊(duì)提供如下培訓(xùn)；大數(shù)據(jù)技術(shù)與數(shù)據(jù)處理基礎(chǔ)知識(shí)；R語(yǔ)言開(kāi)發(fā)基礎(chǔ)與RStudio工具使用基礎(chǔ)；數(shù)據(jù)挖掘算法與數(shù)據(jù)可視化基礎(chǔ)知識(shí)；定制化報(bào)表實(shí)際應(yīng)用案例；計(jì)劃安排六輪培訓(xùn)，每輪5天，每輪不少于200人，即滿足人數(shù)不少于200人，每人不少于30天的要求。表17-3分析挖掘培訓(xùn)課程表培訓(xùn)類型培訓(xùn)課程培訓(xùn)時(shí)間培訓(xùn)內(nèi)容簡(jiǎn)介基礎(chǔ)培訓(xùn)大數(shù)據(jù)技術(shù)與數(shù)據(jù)處理基礎(chǔ)知識(shí)1天大數(shù)據(jù)技術(shù)與數(shù)據(jù)處理基礎(chǔ)知識(shí)業(yè)務(wù)分析培訓(xùn)R語(yǔ)言初級(jí)培訓(xùn)RStudio工具使用培訓(xùn)1天RStudio工具介紹培訓(xùn)R語(yǔ)言編程基礎(chǔ)、數(shù)據(jù)處理、作圖和數(shù)據(jù)分析R軟件及應(yīng)用統(tǒng)計(jì)方法1天語(yǔ)言入門、用R編程、用R繪圖。基礎(chǔ)統(tǒng)計(jì)、經(jīng)典回歸分析、現(xiàn)代回歸和分類、列聯(lián)表分析、關(guān)聯(lián)規(guī)則分析、廣義線性模型、多層模型、通過(guò)顧客滿意度模型引入路徑模型及其PLS偏最小二乘方法和SEM模型、時(shí)間序列簡(jiǎn)介及狀態(tài)空間模型、多元分析TranswarpDiscover基礎(chǔ)培訓(xùn)1天TranswarpDiscover基礎(chǔ)原理，問(wèn)題診斷，基礎(chǔ)算法庫(kù)簡(jiǎn)介，基礎(chǔ)算法調(diào)用實(shí)踐定制化報(bào)表實(shí)際應(yīng)用案例1天定制化報(bào)表實(shí)際應(yīng)用案例培訓(xùn)運(yùn)行維護(hù)培訓(xùn)我方專門為運(yùn)維人員提供運(yùn)維知識(shí)和技能的轉(zhuǎn)移培訓(xùn)，使其可承擔(dān)系統(tǒng)交付后的運(yùn)維工作，能熟練使用系統(tǒng)監(jiān)控等管理功能，能診斷處理各類問(wèn)題，能夠維護(hù)優(yōu)化系統(tǒng)性能。培訓(xùn)包含如下內(nèi)容：大數(shù)據(jù)和Hadoop簡(jiǎn)介；集團(tuán)大數(shù)據(jù)平臺(tái)和功能介紹；集團(tuán)大數(shù)據(jù)平臺(tái)日常運(yùn)行維護(hù)；集團(tuán)大數(shù)據(jù)平臺(tái)常見(jiàn)問(wèn)題處理；計(jì)劃安排三輪培訓(xùn)，每輪5天，每輪不少于300人，即滿足要求人數(shù)不少于300人，每人不少于14天的要求。具體課程安排如下：表17-4運(yùn)行維護(hù)培訓(xùn)課程表培訓(xùn)類型培訓(xùn)課程培訓(xùn)時(shí)間培訓(xùn)內(nèi)容簡(jiǎn)介基礎(chǔ)培訓(xùn)大數(shù)據(jù)和Hadoop簡(jiǎn)介1天什么是大數(shù)據(jù)？Hadoop功能特點(diǎn)。基礎(chǔ)培訓(xùn)集團(tuán)大數(shù)據(jù)平臺(tái)和功能介紹1天大數(shù)據(jù)平臺(tái)架構(gòu)和各項(xiàng)功能介紹。基礎(chǔ)培訓(xùn)集團(tuán)大數(shù)據(jù)平臺(tái)日常運(yùn)行維護(hù)培訓(xùn)2天大數(shù)據(jù)平臺(tái)的日常運(yùn)行維護(hù)工作詳細(xì)介紹；基礎(chǔ)培訓(xùn)集團(tuán)大數(shù)據(jù)平臺(tái)常見(jiàn)問(wèn)題處理1天集團(tuán)大數(shù)據(jù)平臺(tái)常見(jiàn)問(wèn)題處理開(kāi)發(fā)培訓(xùn)我方專門為開(kāi)發(fā)人員提供開(kāi)發(fā)知識(shí)和技術(shù)的轉(zhuǎn)移培訓(xùn)，使其可承擔(dān)系統(tǒng)交付后的功能開(kāi)發(fā)工作，完全了解開(kāi)發(fā)過(guò)程、系統(tǒng)配置和功能開(kāi)發(fā)內(nèi)容，能熟練完成系統(tǒng)功能開(kāi)發(fā)、升級(jí)，對(duì)于系統(tǒng)軟件問(wèn)題能獨(dú)立診斷和處理，培訓(xùn)包含如下內(nèi)容：計(jì)劃安排兩輪培訓(xùn)，每輪15天，每輪不少于200人，即滿足要求人數(shù)不少于200人，每人不少于30天的要求。表17-5開(kāi)發(fā)培訓(xùn)課程表培訓(xùn)類型培訓(xùn)課程培訓(xùn)時(shí)間培訓(xùn)內(nèi)容簡(jiǎn)介基礎(chǔ)培訓(xùn)大數(shù)據(jù)生態(tài)圈以及原理構(gòu)架課程1天包含下列內(nèi)容：ApacheHadoop的發(fā)展歷史ApacheHadoop生態(tài)系統(tǒng)HDFS技術(shù)原理、HDFS基本操作和編程Map/Reduce基礎(chǔ)集群架構(gòu)技術(shù)開(kāi)發(fā)培訓(xùn)TranswarpDataHub安裝培訓(xùn)1天提供TranswarpDataHub各組件的安裝、配置、部署、監(jiān)控、維護(hù)，以及高可用性配置的培訓(xùn)，組件包括TranswarpHadoop，TranswarpHyperbase，TranswarpInceptor，TranswarpStreamTranswarpDataHub產(chǎn)品架構(gòu)、軟件特性培訓(xùn)1天提供TranswarpDataHub整體產(chǎn)品架構(gòu)以及各個(gè)組件包括TranswarpHadoop，TranswarpHyperbase，TranswarpInceptor，TranswarpStream的功能特性介紹TranswarpDataHub運(yùn)維培訓(xùn)1天產(chǎn)品運(yùn)維培訓(xùn)，包括日常運(yùn)維管理指標(biāo)監(jiān)控以及故障診斷Hyperbase開(kāi)發(fā)培訓(xùn)課程2天包含下列內(nèi)容：Zookeeper的原理、Zookeeper的基本操作、Hyperbase的組成和原理、常見(jiàn)數(shù)據(jù)模型設(shè)計(jì)模式、基本編程接口、Hyperbase的運(yùn)行和操作Hyperbase集群的優(yōu)化Inceptor開(kāi)發(fā)培訓(xùn)課程2天包含下列主要內(nèi)容：Inceptor的架構(gòu)和組成Inceptor的數(shù)據(jù)模型Inceptor的執(zhí)行引擎InceptorSQL語(yǔ)法詳解JDBC接口編程TDH中Inceptor的高級(jí)特性：創(chuàng)建內(nèi)存列式數(shù)據(jù)庫(kù)；設(shè)置高效索引和過(guò)濾，加快Group-By和JOIN操作。Stream開(kāi)發(fā)培訓(xùn)1天包含下列主要內(nèi)容：Stream架構(gòu)和原理編寫(xiě)StreamJobStream性能及優(yōu)化StreamSQLStream接口等；半結(jié)構(gòu)化數(shù)據(jù)與圖數(shù)據(jù)應(yīng)用開(kāi)發(fā)1天半結(jié)構(gòu)化數(shù)據(jù)處理與圖數(shù)據(jù)應(yīng)用開(kāi)發(fā)Map/Reduce原理編程培訓(xùn)1天MapReduce基礎(chǔ)原理深入講解MapReduce編程實(shí)例培訓(xùn)Spark原理編程培訓(xùn)1天Spark基礎(chǔ)原理深入講解Spark編程實(shí)例培訓(xùn)數(shù)據(jù)挖掘應(yīng)用開(kāi)發(fā)培訓(xùn)2天數(shù)據(jù)挖掘基礎(chǔ)培訓(xùn)，數(shù)據(jù)挖掘常用算法培訓(xùn)，TranswarpDiscover基礎(chǔ)原理，問(wèn)題診斷，基礎(chǔ)算法庫(kù)簡(jiǎn)介，基礎(chǔ)算法調(diào)用實(shí)踐，應(yīng)用開(kāi)發(fā)實(shí)踐TranswarpDataHub系統(tǒng)性能監(jiān)控與調(diào)優(yōu)1天性能監(jiān)控與調(diào)優(yōu)培訓(xùn)我方提供的培訓(xùn)內(nèi)容涵蓋了集團(tuán)對(duì)技術(shù)開(kāi)發(fā)團(tuán)隊(duì)培訓(xùn)要求的全部?jī)?nèi)容：大數(shù)據(jù)技術(shù)基礎(chǔ)知識(shí)大數(shù)據(jù)產(chǎn)品軟件架構(gòu)、功能特性日常運(yùn)維管理、監(jiān)控與故障診斷結(jié)構(gòu)化數(shù)據(jù)庫(kù)應(yīng)用開(kāi)發(fā)流式計(jì)算應(yīng)用開(kāi)發(fā)應(yīng)用整體規(guī)劃與系統(tǒng)性能優(yōu)化指南半結(jié)構(gòu)化數(shù)據(jù)與圖數(shù)據(jù)應(yīng)用開(kāi)發(fā)數(shù)據(jù)挖掘應(yīng)用開(kāi)發(fā)MapReduce與Spark計(jì)算編程范型培訓(xùn)目標(biāo)我方對(duì)于向用戶提供的培訓(xùn)服務(wù)通過(guò)精心準(zhǔn)備、細(xì)致安排、積極實(shí)施、及時(shí)總結(jié)，會(huì)取得好的效果和既定的目標(biāo)。我們的培訓(xùn)目標(biāo)為：通過(guò)培訓(xùn)確保使用人員經(jīng)過(guò)培訓(xùn)后，能熟練使用系統(tǒng)，進(jìn)行應(yīng)用開(kāi)發(fā)，充分了解各個(gè)子系統(tǒng)的功能操作流程和方法，并通過(guò)系統(tǒng)提高工作效率和質(zhì)量。確保系統(tǒng)維護(hù)人員經(jīng)過(guò)培訓(xùn)后，應(yīng)能監(jiān)控系統(tǒng)運(yùn)行情況，及時(shí)排除常見(jiàn)系統(tǒng)故障，針對(duì)使用人員進(jìn)行使用問(wèn)題技術(shù)支持。能夠獨(dú)立完成系統(tǒng)的維護(hù)工作，掌握網(wǎng)絡(luò)運(yùn)行情況，以及及時(shí)排除部分系統(tǒng)故障。確保高級(jí)系統(tǒng)管理員經(jīng)過(guò)培訓(xùn)后，能熟練掌握系統(tǒng)整體結(jié)構(gòu)，系統(tǒng)數(shù)據(jù)結(jié)構(gòu)、能夠分析系統(tǒng)故障，管理系統(tǒng)設(shè)備，掌握系統(tǒng)內(nèi)部和外部接口，承擔(dān)全面的技術(shù)管理工作。培訓(xùn)方式此次建設(shè)項(xiàng)目中涉及到的軟件功能較多、對(duì)技術(shù)人員的技術(shù)能力要求較高，為了項(xiàng)目的順利實(shí)施和今后日常維護(hù)工作的正常進(jìn)行，參加培訓(xùn)的技術(shù)人員需要具備較全面的知識(shí)。為此，我們制定了全面的培訓(xùn)計(jì)劃。現(xiàn)場(chǎng)培訓(xùn)是項(xiàng)目實(shí)施不可分割的一個(gè)部分，現(xiàn)場(chǎng)培訓(xùn)是指在平臺(tái)工作的現(xiàn)場(chǎng)，進(jìn)行的簡(jiǎn)單、快捷、實(shí)用的技術(shù)傳授。這種培訓(xùn)的特點(diǎn)是針對(duì)性強(qiáng)、直觀、方式靈活，而且與實(shí)際結(jié)合緊密，用戶在培訓(xùn)中的問(wèn)題可以及時(shí)得到解答。現(xiàn)場(chǎng)培訓(xùn)的培訓(xùn)教師由我們的實(shí)施人員工程師來(lái)完成，他們會(huì)對(duì)安裝配置的過(guò)程進(jìn)行詳細(xì)的講解。現(xiàn)場(chǎng)培訓(xùn)對(duì)于系統(tǒng)管理員和運(yùn)行維護(hù)人員來(lái)說(shuō)是個(gè)提高自身技術(shù)水平的難得機(jī)會(huì)。培訓(xùn)資源我方培訓(xùn)還需要落實(shí)以下內(nèi)容：培訓(xùn)時(shí)間——結(jié)合項(xiàng)目實(shí)施計(jì)劃進(jìn)行階段性培訓(xùn)，系統(tǒng)使用人員培訓(xùn)、一般系統(tǒng)維護(hù)人員培訓(xùn)在試運(yùn)行前完成，高級(jí)系統(tǒng)管理員培訓(xùn)可以在試運(yùn)行期間安排完成。培訓(xùn)教材——我方將在培訓(xùn)前編制完整實(shí)用的培訓(xùn)教材，并