大數據的概念及影響數據庫與大數據章名：節名：大數據的概念大數據的影響12大數據的特性？大數據的概念4V大量化VOLUME快速化VELOCITY多樣化VARIETY價值密度低VALUE大數據的概念數據量大(大量化)根據國際機構IDC作出的估測，數據一直都在以每年50%的速度增長，也就是說每兩年就增長一倍。（大數據摩爾定律）人類在最近兩年產生的數據量相當于之前產生的全部數據量。預計到2020年，全球將總共擁有35ZB的數據量，相較于2010年，數據量將增長近30倍。1ZB≈103EB≈106PB≈109TB大數據的概念2.數據類型多樣化大數據的數據類型繁多，由結構化和非結構化

數據組成的。10%的結構化數據，存儲在關系數據庫中有規律

的數據。90%的非結構化數據，它們與人類信息密切相關。大數據的概念2.數據類型多樣化企業應用Email文檔、文件應用日志交易記錄Web2.0數據查詢日志/點擊流Twitter(推特)Blog(博客)SNS(社交網絡服務)Wiki(超文本系統)科學研究基因組LHC(粒子)加速器地球與空間探測Web1.0數據文本、圖像、視頻3.處理速度非常快大數據的概念秒級服務以前：把大量數據拿出來進行分析，后拿出

一個報告，服務企業決策。現在：企業級應用都需要秒級決策。從數據的生成到消耗，時間窗口非常小，可用于生成決策的時間非常少。1秒定律：這一點也是和傳統的數據挖掘技術有著本質的不同。大數據概念實例：谷歌公司開發一款Dremel產品，做交互式查詢。這樣一個

產品可達到一個什么樣的查詢實時程度呢？結論：把成百上千臺服務器同時調動起來做集群運算，1秒鐘左右

可實現1PB數據量的交互式查詢。4.價值密度低大數據的概念1、社會發展方面2、就業市場方面3、人才培養方面4、科學研究方面5、思維方式方面大數據的影響1、社會發展方面大數據決策逐漸成為一種新的決策方式，大數據應用有力促進了信息技術與各行業的深度融合，大數據開發大大推動了新技術和新應用的不斷涌現。2、就業市場方面大數據的興起使得數據科學家成為熱門職業。大數據的影響3、人才培養方面大數據的興起，將在很大程度上改變中國高校信息技術相關專業的現有教學和科研體制。4、科學研究方面大數據的影響JimGray博士數據庫專家圖靈獎獲得者(提出了事務理論)4、科學研究方面大數據的影響大數據的到來使科學研究出現了第四種范式。實驗(伽利略比薩斜塔)理論(牛頓第三定律)計算(計算時代，1940年后)數據(以大數據為驅動全新的科學研究時代，2010年后)大數據的影響大數據的影響維克托·邁爾-舍恩伯格(著)在思維方式方面，大數據完全顛覆了傳統的思維方式：全樣而非抽樣效率而非精確相關而非因果5、思維方式方面全面而非抽樣大數據的影響數據太多，無法存儲、計算和分析，統計學采用抽樣。大數據時代足夠的空間進行存儲利用眾多CPU的服務器集群進行計算全樣數據分析效率而非精確大數據的影響全面而非抽樣抽樣分析的結果：注重精確度，否則，數據放大到全樣誤差會放大。大數據分析的結果：使用的是全部數據，精確度是固定的，不會放大。數據分析的時效性非常重要，數據在瞬間就要得出結果，否則價值將會消失。效率比精確度更重要相關而非因果大數據的影響效率而非精確全面而非抽樣