㈠ 雲計算的知識梳理
一、雲計算的定義：
官方：雲計算是一種按使用量付費的模式（資源服務模式），該模式可以實現隨時隨地、便捷按需的從可配置資源共享池中獲取所需的資源。包括網路、伺服器、存儲、應用及服務，資源能夠快速供應並釋放，大大減少了資源管理工作的開銷。
網路：雲計算 是基於互聯網的相關服務的增加、使用和交付模式，通常涉及通過互聯網來提供動態易擴展且經常是虛擬化的資源。
特點：1.超大規模 2.虛擬化 3.高可靠性 4.按需服務 5.高可擴展性
二、OpenStack的歷史版本：
雲計算：2010年 元年，因為出現了OpenStack的第一個版本Austin（2010-10-21），目前已經到最新版本Queens,前一個版本是Pike版本，發行版本的規律：字母表順序A-Z來命名的
三、OpenStack的難點在哪裡？
1、OpenStack涉及的知識領域極廣
2、OpenStack是一個平台，並不是一個具體的實施方案
OpenStack的Cinder（存儲服務）定義了上層API，分布式存儲軟體，Ceph、HDFS對應的驅動
3、OpenStack本身是一個分布式系統：All-in-one部署
對於一個小白來說，OpenStack的搭建無疑是一個痛點，這個門檻有點高，我在開始學習的時候，也是煞費苦心，所以學好基礎知識真的非常重要。
四、什麼是虛擬化？
1）、虛擬化與虛擬化技術是什麼？
虛擬化是雲計算的基礎，
虛擬化：軟體模擬硬體的過程
具體定義：虛擬化使一台物理機上可以跑多台虛擬機，虛擬機共享物理機的CPU、內存、IO等硬體資源，每一台虛擬機邏輯上是相互隔離的。
行業內專用術語：
1、物理機：宿主機Host
2、虛擬機：客戶機Guest
2）、虛擬化分類（按照虛擬化實現結構）：
1、1型虛擬化
定義：Hypervisor直接安裝在物理機（裸機）上，多個虛擬機在Hypervisor上運行。
特點: 1型虛擬機本身就是一個操作系統，不需要其他操作系統的支持
舉例：VMware的ESXI（workstation、server）
2型虛擬化
物理機上首先安裝常規的操作系統，比如 Redhat、Ubuntu 和 Windows。Hypervisor 作為 OS 上的一個程序模塊運行，並對管理虛擬機進行管理。KVM、VirtualBox 和 VMWare Workstation 都屬於這個類型。
虛擬化技術：一種運行在基礎物理伺服器和操作系統之間的中間軟體層，可以訪問伺服器上包括磁碟和內存在內的所有物理設備。Hypervisor協調著這些硬體資源的訪問，以及各個虛擬機之間的防護。伺服器啟動時，它會載入所有虛擬機客戶端的操作系統，同時為虛擬機分配內存、磁碟和網路等。也可叫做VMM（ virtual machine monitor ），即虛擬機監視器。
1型和2型虛擬化的對比：
1、前者性能比後者好
2、前者不需要操作系統支持，後者需要
3、後者更加靈活，特點：支持虛擬機的嵌套
使用虛擬化的原因：
打破實體結構間不可切割的障礙，使用戶能更好的利用這些資源
沒有虛擬化:伺服器的IT資源30%
有虛擬化：伺服器的IT資源70%
3）、虛擬化的優點
1、提高IT資源利用率
2、顯著減少了伺服器的數量，企業不動資產和管理成本。
3、加速應用部署
4、提高應用兼容性
五、雲計算服務三層架構：根據提供服務的不同（會在下一篇詳細講解三種服務）
1、IaaS:infrastructure as a Service
定義：基礎服務層
功能：提供的服務是存儲、計算、網路等硬體資源 OpenStack
特點：負責管理虛擬機的整個生命周期，虛擬機創建、修改、啟動停止、快照/備份、銷毀
舉例：阿里雲、騰訊雲、亞馬遜的AWS（Amazon webserice）
2、PaaS：platform as a service
定義：平台服務層
功能：提供的服務是應用程序的運行環境和一系列中間件服務
特點：負責保證服務的性能和可用性。
舉例：大數據和深度學習容器雲平台
3、SaaS：Software as a service
定義：軟體服務層
功能：提供的服務是軟體/應用程序。
特點：用戶需要登錄並使用它，"拿來即用"
舉例：facebook、twitter、instagram、QQ、微信
網上還有人說Docker的CaaS（container as a service）容器服務層。
六、OpenStack是什麼？
OpenStack is a cloud operating system that controls large pools of storage, compute,and networking resources throughout a datacenter,all managed through a dashboard that gives administrators control while empowering their users to provision resources through a web interface。
官方定義：OpenStack是一個（可以管理整個數據中心裡存儲、計算及網路資源的）雲操作系統。
OpenStack 作為一個操作系統，管理資源是它的首要任務；
OpenStack 管理資源主要有三個方面：計算、存儲和網路。
整個OpenStack是由控制節點，計算節點，網路節點，存儲節點四大部分組成。這四個節點也可以安裝在一台機器上，單機部署（All-in-one部署）
控制節點 負責對其餘節點的控制，包含虛擬機建立，遷移，網路分配，存儲分配等等
計算節點 負責虛擬機運行
網路節點 負責對外網路與內網路之間的通信
存儲節點 負責對虛擬機的額外存儲管理等等
下面我給出一張官方架構圖（給出中文版方便理解）：
OpenStack的組件：
Nova：計算管理服務，提供了對計算節點的Nova的管理，使用Nova-API進行通信 （核心服務）
Neutron：網路管理服務，提供了對網路節點的網路拓撲管理，同時提供Neutron在Horizon的管理面板（核心服務）
Glance：鏡像管理服務，提供了對虛擬機部署的時候所能提供的鏡像的管理，包含鏡像的導入，格式，以及製作相應的模板（核心服務）
Keystone：認證管理服務，為OpenStack的其他組件提供認證（auth）服務 （核心服務）
Cinder：提供管理存儲節點的Cinder相關（為虛擬機提供存儲卷（虛擬硬碟）） （核心服務）
Swift：為Glance和Cinder提供對象存儲服務
Ceilometer：為OpenStack提供監控（monitor）、計量服務；提供對物理資源以及虛擬資源的監控，並記錄這些數據，對該數據進行分析，在一定條件下觸發相應動作
Heat：提供了基於模板來實現雲環境中資源的初始化，依賴關系處理，部署等基本操作，也可以解決自動收縮,負載均衡等高級特性。
Horizon：控制台服務，提供了以Web的形式對所有節點的所有服務的管理 （核心服務）
第一次寫關於技術方面的文章，不足之處後面還會修改補充，希望自己堅持下去。
㈡ 什麼是雲計算和大數據
雲計算(cloud computing)是基於互聯網的相關服務的增加、使用和交付模式，通常涉及通過互聯網來提供動態易擴展且經常是虛擬化的資源。雲是網路、互聯網的一種比喻說法。過去在圖中往往用雲來表示電信網，後來也用來表示互聯網和底層基礎設施的抽象。狹義雲計算指IT基礎設施的交付和使用模式，指通過網路以按需、易擴展的方式獲得所需資源;廣義雲計算指服務的交付和使用模式，指通過網路以按需、易擴展的方式獲得所需服務。這種服務可以是IT和軟體、互聯網相關，也可是其他服務。它意味著計算能力也可作為一種商品通過互聯網進行流通。
大數據(big data)，或稱海量數據，指的是所涉及的資料量規模巨大到無法透過目前主流軟體工具，在合理時間內達到擷取、管理、處理、並整理成為幫助企業經營決策更積極目的的資訊。大數據的4V特點：Volume、Velocity、Variety、Veracity。
從技術上看,大數據與雲計算的關系就像一枚硬幣的正反面一樣密不可分。大數據必然無法用單台的計算機進行處理,必須採用分布式計算架構。它的特色在於對海量數據的挖掘,但它必須依託雲計算的分布式處理、分布式資料庫、雲存儲和虛擬化技術。
大數據管理，分布式進行文件系統，如Hadoop、Maprece數據分割與訪問執行;同時SQL支持，以Hive+HADOOP為代表的SQL界面支持，在大數據技術上用雲計算構建下一代數據倉庫成為熱門話題。從系統需求來看，大數據的架構對系統提出了新的挑戰：
1、集成度更高。一個標准機箱最大限度完成特定任務。
2、配置更合理、速度更快。存儲、控制器、I/O通道、內存、CPU、網路均衡設計，針對數據倉庫訪問最優設計，比傳統類似平台高出一個數量級以上。
3、整體能耗更低。同等計算任務，能耗最低。
4、系統更加穩定可靠。能夠消除各種單點故障環節，統一一個部件、器件的品質和標准。
5、管理維護費用低。數據藏的常規管理全部集成。
6、可規劃和預見的系統擴容、升級路線圖。
㈢ 大數據和雲計算的區別
1、目的不同：大數據是為了發掘信息價值，而雲計算主要是通過互聯網管理資源，提供相應的服務。
2、對象不同：大數據的對象是數據，雲計算的對象是互聯網資源以及應用等。
3、背景不同：大數據的出現在於用戶和社會各行各業所產生大的數據呈現幾何倍數的增長；雲計算的出現在於用戶服務需求的增長，以及企業處理業務的能力的提高。
4、價值不同：大數據的價值在於發掘數據的有效信息，雲計算則可以大量節約使用成本。
結構
大數據包括結構化、半結構化和非結構化數據，非結構化數據越來越成為數據的主要部分。據IDC的調查報告顯示：企業中80%的數據都是非結構化數據，這些數據每年都按指數增長60%。
大數據就是互聯網發展到現今階段的一種表象或特徵而已，沒有必要神話它或對它保持敬畏之心，在以雲計算為代表的技術創新大幕的襯托下，這些原本看起來很難收集和使用的數據開始容易被利用起來了，通過各行各業的不斷創新，大數據會逐步為人類創造更多的價值。
以上內容參考：網路-大數據
㈣ 什麼是雲計算什麼是大數據二者有何聯系
雲計算的關鍵詞在於「整合」，無論你是通過現在已經很成熟的傳統的虛擬機切分型技術，還是通過google後來所使用的海量節點聚合型技術，他都是通過將海量的伺服器資源通過網路進行整合，調度分配給用戶，從而解決用戶因為存儲計算資源不足所帶來的問題。
大數據正是因為數據的爆發式增長帶來的一個新的課題內容，如何存儲如今互聯網時代所產生的海量數據，如何有效的利用分析這些數據等等。
他倆之間的關系你可以這樣來理解，雲計算技術就是一個容器，大數據正是存放在這個容器中的水，大數據是要依靠雲計算技術來進行存儲和計算的。
(4)大數據雲計算知識大全擴展閱讀：
雲計算常與網格計算、效用計算、自主計算相混淆。
網格計算：分布式計算的一種，由一群鬆散耦合的計算機組成的一個超級虛擬計算機，常用來執行一些大型任務；
效用計算：IT資源的一種打包和計費方式，比如按照計算、存儲分別計量費用，像傳統的電力等公共設施一樣；
自主計算：具有自我管理功能的計算機系統。
事實上，許多雲計算部署依賴於計算機集群（但與網格的組成、體系結構、目的、工作方式大相徑庭），也吸收了自主計算和效用計算的特點。
被普遍接受的雲計算特點如下：
(1) 超大規模
「雲」具有相當的規模，Google雲計算已經擁有100多萬台伺服器， Amazon、IBM、微軟、Yahoo等的「雲」均擁有幾十萬台伺服器。企業私有雲一般擁有數百上千台伺服器。「雲」能賦予用戶前所未有的計算能力。
(2) 虛擬化
雲計算支持用戶在任意位置、使用各種終端獲取應用服務。所請求的資源來自「雲」，而不是固定的有形的實體。應用在「雲」中某處運行，但實際上用戶無需了解、也不用擔心應用運行的具體位置。只需要一台筆記本或者一個手機，就可以通過網路服務來實現我們需要的一切，甚至包括超級計算這樣的任務。
(3) 高可靠性
「雲」使用了數據多副本容錯、計算節點同構可互換等措施來保障服務的高可靠性，使用雲計算比使用本地計算機可靠。
(4) 通用性
雲計算不針對特定的應用，在「雲」的支撐下可以構造出千變萬化的應用，同一個「雲」可以同時支撐不同的應用運行。
(5) 高可擴展性
「雲」的規模可以動態伸縮，滿足應用和用戶規模增長的需要。
(6) 按需服務
「雲」是一個龐大的資源池，你按需購買；雲可以像自來水，電，煤氣那樣計費。
大數據特徵：
1 容量（Volume）：數據的大小決定所考慮的數據的價值和潛在的信息；
2 種類（Variety）：數據類型的多樣性；
3 速度（Velocity）：指獲得數據的速度；
4 可變性（Variability）：妨礙了處理和有效地管理數據的過程。
5 真實性（Veracity）：數據的質量
6 復雜性（Complexity）：數據量巨大，來源多渠道
7 價值（value）：合理運用大數據，以低成本創造高價值
想要系統的認知大數據，必須要全面而細致的分解它，著手從三個層面來展開：
第一層面是理論，理論是認知的必經途徑，也是被廣泛認同和傳播的基線。在這里從大數據的特徵定義理解行業對大數據的整體描繪和定性；從對大數據價值的探討來深入解析大數據的珍貴所在；洞悉大數據的發展趨勢；從大數據隱私這個特別而重要的視角審視人和數據之間的長久博弈。
第二層面是技術，技術是大數據價值體現的手段和前進的基石。在這里分別從雲計算、分布式處理技術、存儲技術和感知技術的發展來說明大數據從採集、處理、存儲到形成結果的整個過程。
第三層面是實踐，實踐是大數據的最終價值體現。在這里分別從互聯網的大數據，政府的大數據，企業的大數據和個人的大數據四個方面來描繪大數據已經展現的美好景象及即將實現的藍圖。
㈤ 大數據雲計算主要學習什麼呢
雲計算需要學習的知識是：1、網路通信知識，包括互聯網基礎建設相關的所有知識；2、虛擬化知識，應該了解硬體運行原理以及虛擬化實現技術；3、資料庫技術；4、網路存儲技術；5、網路信息安全技術，最起碼得明白什麼是iso 17799；6、電子商務；7、容災及備份技術；8、JAVA編程技術；9、分布式系統架構
㈥ 學習雲計算和大數據要有哪些基礎知識
大數據前景是很不錯的，像大數據這樣的專業還是一線城市比較好，師資力量跟得上、就業的薪資也是可觀的，學習大數據可以按照路線圖的順序，
0基礎學習Java是沒有問題的，關鍵是找到靠譜的Java培訓機構，你可以深度了解機構的口碑情況，問問周圍知道這家機構的人，除了口碑再了解機構的以下幾方面：
1. 師資力量雄厚
要想有1+1>2的實際效果，很關鍵的一點是師資隊伍，你接下來無論是找個工作還是工作中出任哪些的人物角色，都越來越愛你本身的技術專業java技術性，也許的技術專業java技術性則絕大多數來自你的技術專業java教師，一個好的java培訓機構必須具備雄厚的師資力量。
2. 就業保障完善
實現1+1>2效果的關鍵在於能夠為你提供良好的發展平台，即能夠為你提供良好的就業保障，讓學員能夠學到實在實在的知識，並向java學員提供一對一的就業指導，確保學員找到自己的心理工作。
3. 學費性價比高
一個好的Java培訓機構肯定能給你帶來1+1>2的效果，如果你在一個由專業的Java教師領導並由Java培訓機構自己提供的平台上工作，你將獲得比以往更多的投資。
希望你早日學有所成。
㈦ 大數據雲計算都要學習什麼
雲計算與大數據工程師是指將包括硬體軟體的一切資源（計算能力，存儲等）通過虛擬化和分布式技術，對網路中海量數據中，進行高效的獲取數據，有效的深加工，並最終得到感興趣的數據，以數據為支撐，通過網路以便利的、按需付費的方式獲取計算資源（包括網路、伺服器、存儲、應用和服務等）並提高其可用性的模式。