大數據開篇

1。大數據時代來臨的因素：
1.1信息浪潮
    1.第一次  1980  PC機  解決問題：信息處理   代表企業 ：Intel AMD IBM
    2.第二次   1995  互聯網   解決問題：信息傳輸  代表企業：雅虎，谷歌  BAT
    3.第三次   2010  物聯網、雲計算、大數據  解決問題：信息爆炸  代表企業 亞馬遜、谷歌、Cloudera、阿里雲等
1.2信科技爲大數據時代提供技術支撐
    1.存儲設備容量增加（DVD光盤爲例。將來可以 1DVD容量 10^6GB
    2.CPU處理能力提升
    3.網絡帶寬增加
1.3數據產生方式的變革促成大數據時代的來臨(數據產生階段)
    1.運營式系統階段
    2.用戶原創內容階段
    3.感知系統階段
1.4大數據發展歷程
    1.萌芽期 20世紀90年代 -21世紀初    數據庫技術成熟和數據挖掘理論
    2.成熟期 21世紀前10年  web2.0應用發展，非結構化數據大量產生，Hadoop平臺MapReduce技術
    3.大規模應用  2010年後  數據驅動決策，信息社會智能化程度
2 大數據的概念
    4V  Volume 數據量大  Variety 數據類型繁多 Velocity 處理速度快 Value 價值密度低
    2.1 數據量大
    1ZB=1024EB 1024PB 1024TB 1024GB 1024MB 1024KB 1024Byte 8bit
    大數據以每年50%的速度在增長，也就是說每兩年就增加一倍，這被稱爲“大數據摩爾定律”
    2.2 數據類型繁多
        10%存儲在關係型數據庫中，90%存儲在非關係型數據庫中
    2.3 處理速度快
    2.4 價值密度低
3 大數據的影響
    人類科學研究經歷四種模式：
        1.實驗科學
        2.理論科學
        3.計算科學
        4.數據密集型科學
    思維的轉變：
     1.全面而非抽樣
     2.效率而非精確
     3.相關而非因果
大數據計算模式
    1.批處理計算
    2.流計算
    3.圖計算
    4.查詢分析計算
大數據與雲計算和物聯網
    大數據：    4V  Volume 數據量大  Variety 數據類型繁多 Velocity 處理速度快 Value 價值密度低
    雲計算：通過網絡提供課伸縮的、廉價的分佈式計算能力，用戶只需要在具備網絡接入條件的地方，就可以隨時隨地獲得所需的各種IT
        資源。
    雲計算包括3種典型的服務模式。LaaS PaaS SaaS 基礎設施即服務 平臺即服務 軟件即服務
    1.雲計算關鍵技術：
        虛擬化、分佈式存儲、分佈式計算、多租戶等。
    2.雲計算數據中心 （地質穩定，涼爽舒適）
        計算中心電力利用：（55%電力用於製冷 45%服務器（其中70%服務器風扇，30%CPU（其中10%用於計算）））
    物聯網：物物相連的物聯網，是互聯網的延伸，利用局部網絡或互聯網等通信技術把傳感器、控制器、機器、人員和物等通過
        新的方式連在一起，形成人與物、物與物相連，實現信息化和遠程管理控制。
        技術角度分四個層面：感知層、網絡層、處理層和應用層。
區別：大數據側重於對海量數據的存儲、處理與分析，從海量數據中發現價值，服務與生產和生活。
    雲計算本質旨在整合和優化各種IT資源，通過網絡以服務的方式廉價地提供給用戶
    物聯網發展目標物物相聯，應用創新時物聯網的核心。
聯繫：雲計算爲大數據提供了技術基礎。雲計算爲物聯網提供海量數據存儲能力。
      大數據爲雲計算提供用武之地。大數據爲物聯網數據分析提供支撐。
      物聯網爲雲計算技術提供了廣闊的應用空間。物聯網是大數據的重要來源。