基于數據驅動的數字化轉型Why數字化轉型12What數字化轉型3How數字化轉型數字社會開啟新時代2020年4月，《中共中央、國務院關于構建更加完善的要素市場化體制機制的意見》正式發布，《意見》指出了土地、勞動力、資本、技術、數據五個要素領域改革的方向，明確了完善要素市場化配置的具體措施。數據作為一種新型生產要素，成為了《意見》中備受關注的內容。01020304農業社會土地單擊此處添加文本單擊此處添加單工業社會機械

信息社會電子計算機數字社會數據1、起步2、擴展3、控制4、集成5、數據管理6、成熟初期：煙囪式建設中期：集成式建設后期：數據管理與智能應用

計算機時代（信息化時代）

數字化時代信息化時代---》數字化時代數字化轉型必要性

從信息化到數字化，我們見證了互聯網對社會和個人的深刻影響。隨著新技術、新理念的不斷推出，數字化轉型則在這兩年強勢興起，逐漸改變著企業和市場的格局商業模式發生巨大變化基礎技術發生巨大變化消費領域發生巨大變化政治環境發生巨大變化數據正驅動業務轉型、組織變革。企業由信息化向數字化轉型，如果不進行數字化轉型，企業就要面臨巨大風險，隨時會死掉。目錄Why數字化轉型12What數字化轉型3How數字化轉型分布式架構單體架構分布式數據倉庫傳統關系數據庫ShareEverything架構RDBMSShareDisk架構RACShareNothing架構MPP大規模分布式集群式架構Hadoop①②③④電子商務、社交網絡、智能硬件等Zookeeper（分布式協調服務）數據源數據展現數據分析計算框架數據采集資源管理數據存儲與管理Echarts、D3、Cboard等Sqoop結構化數據導入導出Flume、Kafka半結構化/非結構化數據日志采集，分布式消息隊列HDFS分布式文件系統Impala、Presto數據集市Hive、SparkSQL數據倉庫&SQL引擎SparkMllib人工智能ElasticSearch，Solr綜合搜索Storm，Flink，SparkStreaming實時流處理MapReduce批處理計算架構SparkCore高性能計算架構Yarn，Mesos資源管理系統DC/OS,kubernetes容器化集群操作系統HBase，Redis，MongoDB，Neo4j分布式No/NewSQL數據庫，圖數據庫?數據控制：在數據管理和使用層面之上進行規劃、監督和控制?數據架構管理：定義數據資產管理藍圖?數據開發：數據的分析、設計、實施、測試、部署、維護等工作?數據操作管理：提供從數據獲取到清除的技術支持?數據安全管理：確保隱私、性和適當的訪問權限等?參考數據和主數據管理：管理數據的黃金版本和副本?數據倉庫和商務智能管理：實現報告和分析?文件和內容管理：管理數據庫以外的數據?元數據管理：元數據的整合、控制以及提供元數據?數據質量管理：定義、監測和提高數據質量數據控制元數據管理文件和內容管理數據倉庫和商務智能管理參考數據和主數據管理數據安全管理數據操作管理數據開發數據架構管理數據質量管理數據治理---國際體系DAMA數據治理---國家體系DCMMDCMM定義了數據管理能力的八個能力域，分為28個能力項，每個能力項都劃分為5個等級，共計455項指標。數據戰略數據治理數據架構數據安全數據應用數據標準數據質量數據生命周期數據戰略數據質量數據架構數據應用數據生命周期數據治理數據安全數據標準流程制度技術組織數據資產管理結構化數據結構化、半結構化、非結構化圖像文本語音視頻抽取轉換加載EDW傳統數據倉庫計算/存儲混搭架構ETL/ELTETL人力簡人力簡自動智能工具應用數據資產增值對內強化能力應用數據資產增值對內強化能力外部運營數據資產變現對外共享租售業務部門IT部門IT部門業務部門數據部門組織職能管理手段應用范圍數據對象處理架構VS明確問題數據展現撰寫報告報告演講報告閉環數據分析數據處理數據提取搭建框架●明確問題：先把問題定義清楚●搭建框架：要把問題考慮全面，找到一條主線●數據提取：mysql、hive為主●數據處理：Excel、R、Python為主●數據分析：數據分析方法論為主●數據展現：Tableau、Excel、R、Python●撰寫報告：文筆功底、整體邏輯性●報告演講：溝通能力、表達能力、被提問能力●報告閉環：最難也是最大價值目錄Why數字化轉型12What數字化轉型3How數字化轉型數字化轉型總體思路轉意識轉組織轉文化轉方法轉模式業務與技術雙輪驅動云原生、數據湖對象、流程、規則數字化大平臺支撐精兵作戰業務與IT一體化團隊IT技術：ERP、SCM、HR、OACT技術：某著名企業通信、固某著名企業信、光通信數據技術DTDataTech信息技術