大數據平臺及運維管理應用實戰培訓方案（知識研究或個人學習）（模板）文檔信息文檔名稱:保密級別文檔版本編號:文檔管理編號管理人:制作人:制作日期:復審人:復審日期:版本記錄版本編號版本日期修改者說明大數據案例節選企業名稱訂單編號課程名稱總天數訂單時間大數據spark框架的大數據運用開發大數據搭建與高性能計算課程設計課程名稱大數據及運維管理應用實戰培訓課程目標讓學員深刻理解在“互聯網+”時代下大數據的產生背景、發展歷程和演化趨勢，洞察大數據的潛在價值，結合業界市場需求和國內外最新的大數據技術潮流，掌握Hadoop大數據項目解決方案以及業界大數據應用案例，從而為企業在大數據項目中的技術選型及技術架構設計提供決策參考，幫助學員為企業在利用大數據方面體現出自身價值。讓學員深入理解業界最流行的Hadoop大數據技術臺，能根據給定的應用場景嫻熟地運用大數據技術體系規劃解決方案滿足實際項目需求，部署符合生產環境要求的Hadoop大數據集群，熟練地掌握基于Hadoop大數據集群運維管理和性能調優技巧，并通過具體的實訓項目貫穿整個課程，提高學員的動手實踐技能。培訓特點課程內容根據大數據專家和咨詢管理顧問的工作經驗總結而成定制授課+案例分析講解+實戰操作本課程采用技術原理與項目實戰相結合的方式進行教學，在講授原理的過程中，穿插實際的系統操作，本課程講師也精心準備的實際的應用案例供學員動手訓練。培訓對象系統架構師項目規劃管理人員開發工程師運維工程師大數據業務運營工程師數據分析工程師大數據項目解決方案售前工程師大數據項目售后維護工程師大數據項目技術支持工程師其他具有一定技術基礎的學員培訓時間待定培訓講師XXX培訓地點XXX費用預算：小計：￥XXXX元。序號服務項目說明數量(天)單價（元/天）VIP價格合計1培訓費培訓費小計￥XXXX序號服務項目說明數量(本)單價（元/本）VIP價格合計2教材與培訓資料小計￥0序號服務項目說明人數(天)單價（元/人/天）天數合計3其他費用（標準以50人/期）贈送服務免費答疑一年(限電話、遠程、郵件)----贈送服務小計￥0合計含稅（6%增值稅）￥XXXXXX（人民幣XX萬元整）師資介紹詳細課程方案及執行大數據及運維管理應用實戰培訓課程培訓詳細內容：本課程對Hadoop大數據管理技術進行由淺入深的講解，將Hadoop的全流程解決方案和大數據原理及其管理應用實戰級層次進行系統化地實戰培訓，讓學員深入系統地掌握Hadoop大數據管理應用實踐。本課程讓學員充分掌握主流的大數據處理臺（Hadoop）的管理培訓、系統搭建、數據清洗、數據入庫、系統擴容等，并對Hadoop技術架構以及臺的安裝部署、運維配置、應用開發實戰技能進行深度講解，熟悉國內外主流的大數據處理解決方案、以及大數據應用案例。本課程讓企業學員掌握主流大數據Hadoop大數據處理臺與分析臺的技術架構和實際應用，并用結合實際的生產系統案例進行教學，講解利用Hadoop對通信運營商大數據管理，讓學員成為一名合格的大數據管理員。本課程培訓過程中，講師會帶著學員實戰操作，包括部署、配置業界最流行Hadoop大數據，Spark大數據處理集群，Hadoop調優，Spark集群調優，高可用配置，高可靠性配置，副本配置，機架感知部署等技能。本課程采用技術原理與項目實戰相結合的方式進行教學，在講授原理的過程中，穿插實際的系統操作。本次培訓提供實驗環境，講師帶著學員現場進行安裝、系統搭建的實操。本課程講師也精心準備的實際的應用案例供學員動手訓練，讓學員能夠學以致用，舉一反三地接受系統化大數據技術應用實戰訓練。時間專題詳細內容實踐訓練5天業界主流的Hadoop大數據技術產品與項目解決方案國內外主流的大數據解決方案介紹當前大數據解決方案與傳統數據庫方案的剖析比較ApacheHadoop大數據全流程解決方案ClouderaHadoop大數據全流程解決方案HDPHadoop大數據解決方案開源的大數據生態系統臺剖析大數據產品與解決方案Hadoop大數據Hadoop的發展歷程以及產業界的實際應用介紹Hadoop大數據架構基于Hadoop臺的PB級大數據存儲管理與分析處理的工作原理與機制Hadoop的核心組件剖析Hadoop大數據Hadoop大數據分布式存儲系統原理與應用實踐（HDFS集群的應用實踐）Hadoop分布式文件系統HDFS的簡介HDFS系統的主從式臺架構和工作原理HDFS核心組件技術講解基于HDFS的大型存儲系統應用開發實戰HDFS集群的安裝、部署、配置與性能優化實踐HDFS與LinuxNFS3交互技術以及本地化掛載部署應用實踐HDFS命令操作HDFS存儲管理HDFS高可用性配置HDFS常見故障與解決HDFS大數據存儲管理操作實踐基于Linux集群的Hadoop依賴環境部署（實驗）Linux操作系統部署與配置Linux網絡配置管理Linux的x86服務器集群管理與配置部署Hadoop依賴的Java環境部署Linux多節點服務器之間的無密碼連接Linux集群配置部署Hadoop大數據的依賴環境HDFS部署、配置與性能調優實戰（實驗）Hadoop分布式文件系統部署與配置HDFS（HadoopDistributedFileSystem）部署與配置HDFS存儲管理運維操作實踐HDFS性能調優HDFS數據加載操作實踐HDFS部署、配置與性能調優操作訓練Hadoop大數據組件HDFS部署與性能配置Yarn部署與性能配置HBase分布式數據庫部署與性能配置Hive數據倉庫組件部署與性能配置Sqoop數據導入導出組件部署與性能配置Hadoop大數據組件部署與調優Yarn集群配置和管理操作（實驗）Yarn集群的部署與配置Yarn執行MapReduce作業的性能調優Yarn作業的執行參數配置Yarn配置和管理操作Hadoop集群配置管理與性能調優（實驗）Hadoop集群配置Hadoop性能調優與參數配置Hadoop機架感知策略與配置Hadoop壓縮機制Hadoop任務負載均衡Hadoop集群維護Hadoop監控管理Hadoop備份Hadoop集群調優6天Hadoop大數據集群運維監控工具臺應用Hadoop大數據運維監控管理系統HUE臺的安裝部署與應用配置Hadoop運維管理監控系統Ambari臺的安裝部署與應用配置Hadoop集群監控管理操作Hadoop與Hive大型數據倉庫管理操作訓練（實驗）Hive：一款基于Hadoop的大數據倉庫管理解決方案和產品部署與配置HIVE集群HIVE參數配置、性能調優HIVE數據倉庫操作及項目實踐基于Hive的搜索日志存儲管理和查詢Hive數據倉庫管理操作Spark大數據實時處理臺Spark：一款無縫對接Hadoop的大數據實時處理臺Spark的發展歷程以及業界的實際應用介紹Spark實時大數據處理臺架構基于Hadoop和Spark的大數據綜合解決方案和應用實踐案例Spark大數據實時處理臺部署Hadoop和Spark運維管理部署配置（實驗）SparkStandalone集群部署配置SparkonYarn部署配置Spark的單機部署與配置Spark的集群部署與配置Spark和Hadoop的集成部署和配置Spark部署配置與性能調優Hadoop與Spark的監控管理和性能調優Spark的運行監控原理和機制SparkUI監控Spark性能調優技巧Spark應用程序的配置優化Spark集群的監控配置和優化Spark集群的監控操作交流討論根據講師布置的實際應用案例，開展大數據完整項目部署、配置、參數調優、應用實施及解決方案方案咨詢培訓執行講師提供實驗軟件與虛擬機鏡像，并把Linux，Java，Hadoop，Spark，Mahout，MLlib等系統提前部署在虛擬機中，學員自帶筆記本運行虛擬機實驗集群，鏡像在上課前給學員，學員筆記本推薦配置：i5以上CPU，8GB內存，100GB硬