【51CTO.com原創(chuàng)稿件】上一篇文章我們著重講解了 Docker,其實遺留了一個大問題。Docker 雖好用,但面對強大的集群,成千上萬的容器,突然感覺不香了。
圖片來自 Pexels
這時候就需要我們的主角 Kubernetes 上場了,先來了解一下 K8s 的基本概念,后面再介紹實踐,由淺入深步步為營。
關(guān)于 K8s 的基本概念我們將會圍繞如下七點展開:
- Docker 的管理痛點
- 什么是 K8s?
- 云架構(gòu) & 云原生
- K8s 架構(gòu)原理
- K8s 核心組件
- K8s 的服務(wù)注冊與發(fā)現(xiàn)
- 關(guān)鍵問題
Docker 的管理痛點
如果想要將 Docker 應(yīng)用于龐大的業(yè)務(wù)實現(xiàn),是存在困難的編排、管理和調(diào)度問題。
于是,我們迫切需要一套管理系統(tǒng),對 Docker 及容器進行更高級更靈活的管理。
Kubernetes 應(yīng)運而生!Kubernetes,名詞源于希臘語,意為「舵手」或「飛行員」。
Google 在 2014 年開源了 Kubernetes 項目,建立在 Google 在大規(guī)模運行生產(chǎn)工作負載方面擁有十幾年的經(jīng)驗的基礎(chǔ)上,結(jié)合了社區(qū)中最好的想法和實踐。
K8s 是 Kubernetes 的縮寫,用 8 替代了 「ubernete」,下文我們將使用簡稱。
什么是 K8s ?
K8s 是一個可移植的、可擴展的開源平臺,用于管理容器化的工作負載和服務(wù),可促進聲明式配置和自動化。
K8s 擁有一個龐大且快速增長的生態(tài)系統(tǒng)。K8s 的服務(wù)、支持和工具廣泛可用。
通過 K8s 我們可以:
- 快速部署應(yīng)用
- 快速擴展應(yīng)用
- 無縫對接新的應(yīng)用功能
- 節(jié)省資源,優(yōu)化硬件資源的使用
K8s 有如下特點:
- 可移植:支持公有云,私有云,混合云,多重云 multi-cloud。
- 可擴展:模塊化,插件化,可掛載,可組合。
- 自動化:自動部署,自動重啟,自動復(fù)制,自動伸縮/擴展。
云架構(gòu) & 云原生
①云和 K8s 是什么關(guān)系
云就是使用容器構(gòu)建的一套服務(wù)集群網(wǎng)絡(luò),云由很多的大量容器構(gòu)成。K8s 就是用來管理云中的容器。
②常見幾類云架構(gòu)
常見幾類云架構(gòu)如上圖所示:
- On-Premises(本地部署)。
- IaaS(基礎(chǔ)設(shè)施即服務(wù)):用戶:租用(購買|分配權(quán)限)云主機,用戶不需要考慮網(wǎng)絡(luò),DNS,硬件環(huán)境方面的問題;運營商:提供網(wǎng)絡(luò),存儲,DNS,這樣服務(wù)就叫做基礎(chǔ)設(shè)施服務(wù)。
- PaaS(平臺即服務(wù)):MySQL/ES/MQ/...
- SaaS(軟件即服務(wù)):釘釘,財務(wù)管理。
- Serverless:無服務(wù),不需要服務(wù)器。站在用戶的角度考慮問題,用戶只需要使用云服務(wù)器即可,在云服務(wù)器所在的基礎(chǔ)環(huán)境,軟件環(huán)境都不需要用戶關(guān)心。
如果覺得不好理解,推薦閱讀這篇文章:如何通俗解釋 IaaS、PaaS、SaaS 的區(qū)別:
- https://www.zhihu.com/question/21641778/answer/62523535
可以預(yù)見:未來服務(wù)開發(fā)都是 Serverless,企業(yè)都構(gòu)建了自己的私有云環(huán)境,或者是使用公有云環(huán)境。
③云原生
為了讓應(yīng)用程序(項目,服務(wù)軟件)都運行在云上的解決方案,這樣的方案叫做云原生。
云原生有如下特點:
- 容器化,所有服務(wù)都必須部署在容器中
- 微服務(wù),Web 服務(wù)架構(gòu)式服務(wù)架構(gòu)
- CI/CD
- DevOps
K8s 架構(gòu)原理
①K8s 架構(gòu)
概括來說 K8s 架構(gòu)就是一個 Master 對應(yīng)一群 Node 節(jié)點。下面我們來逐一介紹 K8s 架構(gòu)圖中的 Master 和 Node。
Master 節(jié)點結(jié)構(gòu)如下:
- apiserver 即 K8s 網(wǎng)關(guān),所有的指令請求都必須要經(jīng)過 apiserver。
- Scheduler 調(diào)度器,使用調(diào)度算法,把請求資源調(diào)度到某一個 Node 節(jié)點。
- Controller 控制器,維護 K8s 資源對象。
- etcd 存儲資源對象。
Node 節(jié)點結(jié)構(gòu)如下:
- Kubelet 在每一個 Node 節(jié)點都存在一份,在 Node 節(jié)點上的資源操作指令由 Kubelet 來執(zhí)行。
- Kube-proxy 代理服務(wù),處理服務(wù)間負載均衡。
- Pod 是 K8s 管理的基本單元(最小單元),Pod 內(nèi)部是容器,K8s 不直接管理容器,而是管理 Pod。
- Docker 運行容器的基礎(chǔ)環(huán)境,容器引擎。
- Fluentd 日志收集服務(wù)。
在介紹完 K8s 架構(gòu)后,我們又引入了很多技術(shù)名詞。不要著急,先有整體概念,再各個擊破。請耐心閱讀下文,相信你一定會有不一樣的收獲。
K8s 核心組件
①K8s 組件
K8s 是用來管理容器,但是不直接操作容器,最小操作單元是 Pod (間接管理容器):
- 一個 Master 有一群 Node 節(jié)點與之對應(yīng)。
- Master 節(jié)點不存儲容器,只負責(zé)調(diào)度、網(wǎng)管、控制器、資源對象存儲。
- 容器的存儲在 Node 節(jié)點,容器是存儲在 Pod 內(nèi)部的)。
- Pod 內(nèi)部可以有一個容器,或者多個容器。
- Kubelet 負責(zé)本地 Pod 的維護。
- Kube-proxy 負責(zé)負載均衡,在多個 Pod 之間來做負載均衡。
②Pod 是什么?
解釋如下:
- Pod 也是一個容器,這個容器中裝的是 Docker 創(chuàng)建的容器,Pod 用來封裝容器的一個容器,Pod 是一個虛擬化分組。
- Pod 相當于獨立主機,可以封裝一個或者多個容器。
Pod 有自己的 IP 地址、主機名,相當于一臺獨立沙箱環(huán)境。
③Pod 到底用來干什么?
通常情況下,在服務(wù)部署時候,使用 Pod 來管理一組相關(guān)的服務(wù)。一個 Pod 中要么部署一個服務(wù),要么部署一組有關(guān)系的服務(wù)。
一組相關(guān)的服務(wù)是指:在鏈式調(diào)用的調(diào)用連路上的服務(wù)。
④Web 服務(wù)集群如何實現(xiàn)?
實現(xiàn)服務(wù)集群:只需要復(fù)制多方 Pod 的副本即可,這也是 K8s 管理的先進之處,K8s 如果繼續(xù)擴容,只需要控制 Pod 的數(shù)量即可,縮容道理類似。
⑤Pod 底層網(wǎng)絡(luò),數(shù)據(jù)存儲是如何進行的?
具體如下:
- Pod 內(nèi)部容器創(chuàng)建之前,必須先創(chuàng)建 Pause 容器。
- 服務(wù)容器之間訪問 localhost ,相當于訪問本地服務(wù)一樣,性能非常高。
⑥ReplicaSet 副本控制器
控制 Pod 副本「服務(wù)集群」的數(shù)量,永遠與預(yù)期設(shè)定的數(shù)量保持一致即可。
當有 Pod 服務(wù)宕機時候,副本控制器將會立馬重新創(chuàng)建一個新的 Pod,永遠保證副本為設(shè)置數(shù)量。
副本控制器:標簽選擇器-選擇維護一組相關(guān)的服務(wù)(它自己的服務(wù))
- ReplicationController 副本控制器:單選。
- ReplicaSet 副本控制器:單選,復(fù)合選擇。
- selector:
- app = web
- Release = stable
在新版的 K8s 中,建議使用 ReplicaSet 作為副本控制器,ReplicationController 不再使用了。
⑦Deployment 部署對象
Deployment 部署對象如下:
- 服務(wù)部署結(jié)構(gòu)模型
- 滾動更新
ReplicaSet 副本控制器控制 Pod 副本的數(shù)量。但是,項目的需求在不斷迭代、不斷的更新,項目版本將會不停的的發(fā)版。版本的變化,如何做到服務(wù)更新?
部署模型:
- ReplicaSet 不支持滾動更新,Deployment 對象支持滾動更新,通常和 ReplicaSet 一起使用。
- Deployment 管理 ReplicaSet,RS 重新建立新的 RS,創(chuàng)建新的 Pod。
⑧MySQL 使用容器化部署,存在什么樣的問題?
問題如下:
- 容器是生命周期的,一旦宕機,數(shù)據(jù)丟失
- Pod 部署,Pod 有生命周期,數(shù)據(jù)丟失
對于 K8s 來說,不能使用 Deployment 部署有狀態(tài)服務(wù)。
通常情況下,Deployment 被用來部署無狀態(tài)服務(wù),那么對于有狀態(tài)服務(wù)的部署,使用 StatefulSet 進行有狀態(tài)服務(wù)的部署。
什么是有狀態(tài)服務(wù)?
- 有實時的數(shù)據(jù)需要存儲。
- 有狀態(tài)服務(wù)集群中,把某一個服務(wù)抽離出去,一段時間后再加入機器網(wǎng)絡(luò),如果集群網(wǎng)絡(luò)無法使用。
什么是無狀態(tài)服務(wù)?
- 沒有實時的數(shù)據(jù)需要存儲。
- 無狀態(tài)服務(wù)集群中,把某一個服務(wù)抽離出去,一段時間后再加入機器網(wǎng)絡(luò),對集群服務(wù)沒有任何影響。
⑨StatefulSet
為了解決有狀態(tài)服務(wù)使用容器化部署的一個問題:
- 部署模型
- 有狀態(tài)服務(wù)
StatefulSet 保證 Pod 重新建立后,Hostname 不會發(fā)生變化,Pod 就可以通過 Hostname 來關(guān)聯(lián)數(shù)據(jù)。
K8s 的服務(wù)注冊與發(fā)現(xiàn)
①Pod 的結(jié)構(gòu)是怎樣的?
結(jié)構(gòu)如下:
- Pod 相當于一個容器,Pod 有獨立 IP 地址,也有自己的 Hostname,利用 Namespace 進行資源隔離,獨立沙箱環(huán)境。
- Pod 內(nèi)部封裝的是容器,可以封裝一個,或者多個容器(通常是一組相關(guān)的容器)。
②Pod 網(wǎng)絡(luò)
具體如下:
- Pod 有自己獨立的 IP 地址。
- Pod 內(nèi)部容器之間訪問采用 Localhost 訪問。
Pod 內(nèi)部容器訪問是 Localhost,Pod 之間的通信屬于遠程訪問。
③Pod 是如何對外提供服務(wù)訪問的?
Pod 是虛擬的資源對象(進程),沒有對應(yīng)實體(物理機,物理網(wǎng)卡)與之對應(yīng),無法直接對外提供服務(wù)訪問。
那么該如何解決這個問題呢?Pod 如果想要對外提供服務(wù),必須綁定物理機端口。
也就是說在物理機上開啟端口,讓這個端口和 Pod 的端口進行映射,這樣就可以通過物理機進行數(shù)據(jù)包的轉(zhuǎn)發(fā)。
概括來說:先通過物理機 IP+Port 進行訪問,再進行數(shù)據(jù)包轉(zhuǎn)發(fā)。
④一組相關(guān)的 Pod 副本,如何實現(xiàn)訪問負載均衡?
我們先明確一個概念,Pod 是一個進程,是有生命周期的。宕機、版本更新,都會創(chuàng)建新的 Pod。
這時候 IP 地址會發(fā)生變化,Hostname 會發(fā)生變化,使用 Nginx 做負載均衡就不太合適了。
所以我們需要依賴 Service 的能力。
⑤Service 如何實現(xiàn)負載均衡?
簡單來說,Service 資源對象包括如下三部分:
- Pod IP:Pod 的 IP 地址。
- Node IP:物理機 IP 地址。
- Cluster IP:虛擬 IP ,是由 K8s 抽象出的 Service 對象,這個 Service 對象就是一個 VIP 的資源對象。
⑥Service VIP 更深入原理探討
具體如下:
- Service 和 Pod 都是一個進程,Service 也不能對外網(wǎng)提供服務(wù)。
- Service 和 Pod 之間可以直接進行通信,它們的通信屬于局域網(wǎng)通信。
- 把請求交給 Service 后,Service 使用 iptable,ipvs 做數(shù)據(jù)包的分發(fā)。
⑦Service 對象是如何和 Pod 進行關(guān)聯(lián)的?
具體如下:
- 不同的業(yè)務(wù)有不同的 Service。
- Service 和 Pod 通過標簽選擇器進行關(guān)聯(lián)。
- selector:
- app=x 選擇一組訂單的服務(wù) pod ,創(chuàng)建一個 service;
- 通過 endpoints 存放一組 pod ip;
Service 通過標簽選擇器選擇一組相關(guān)的副本,然后創(chuàng)建一個 Service。
⑧Pod 宕機、發(fā)布新的版本的時候,Service 如何發(fā)現(xiàn) Pod 已經(jīng)發(fā)生了變化?
每個 Pod 中都有 Kube-Proxy,監(jiān)聽所有 Pod。如果發(fā)現(xiàn) Pod 有變化,就動態(tài)更新(etcd 中存儲)對應(yīng)的 IP 映射關(guān)系。
關(guān)鍵問題
①企業(yè)使用 K8s 主要用來做什么?
有如下三個方面:
- 自動化運維平臺,創(chuàng)業(yè)型公司,中小型企業(yè),使用 K8s 構(gòu)建一套自動化運維平臺,自動維護服務(wù)數(shù)量,保持服務(wù)永遠和預(yù)期的數(shù)據(jù)保持一致性,讓服務(wù)可以永遠提供服務(wù)。這樣最直接的好處就是降本增效。
- 充分利用服務(wù)器資源,互聯(lián)網(wǎng)企業(yè),有很多服務(wù)器資源「物理機」,為了充分利用服務(wù)器資源,使用 K8s 構(gòu)建私有云環(huán)境,項目運行在云。這在大型互聯(lián)網(wǎng)公司尤為重要。
- 服務(wù)的無縫遷移,項目開發(fā)中,產(chǎn)品需求不停的迭代,更新產(chǎn)品。這就意味著項目不停的發(fā)布新的版本,而 K8s 可以實現(xiàn)項目從開發(fā)到生產(chǎn)無縫遷移。
②K8s 服務(wù)的負載均衡是如何實現(xiàn)的?
Pod 中的容器很可能因為各種原因發(fā)生故障而死掉。Deployment 等 Controller 會通過動態(tài)創(chuàng)建和銷毀 Pod 來保證應(yīng)用整體的健壯性。
換句話說,Pod 是脆弱的,但應(yīng)用是健壯的。每個 Pod 都有自己的 IP 地址。
當 Controller 用新 Pod 替代發(fā)生故障的 Pod 時,新 Pod 會分配到新的 IP 地址。
這樣就產(chǎn)生了一個問題:如果一組 Pod 對外提供服務(wù)(比如 HTTP),它們的 IP 很有可能發(fā)生變化,那么客戶端如何找到并訪問這個服務(wù)呢?
K8s 給出的解決方案是 Service。Kubernetes Service 從邏輯上代表了一組 Pod,具體是哪些 Pod 則是由 Label 來挑選。
Service 有自己 IP,而且這個 IP 是不變的??蛻舳酥恍枰L問 Service 的 IP,K8s 則負責(zé)建立和維護 Service 與 Pod 的映射關(guān)系。
無論后端 Pod 如何變化,對客戶端不會有任何影響,因為 Service 沒有變。
③無狀態(tài)服務(wù)一般使用什么方式進行部署?
Deployment 為 Pod 和 ReplicaSet 提供了一個 聲明式定義方法,通常被用來部署無狀態(tài)服務(wù)。
Deployment 的主要作用:定義 Deployment 來創(chuàng)建 Pod 和 ReplicaSet 滾動升級和回滾應(yīng)用擴容和索容暫停和繼續(xù)。
Deployment不僅僅可以滾動更新,而且可以進行回滾,如果發(fā)現(xiàn)升級到 V2 版本后,服務(wù)不可用,可以迅速回滾到 V1 版本。
作者:jartto
編輯:陶家龍
征稿:有投稿、尋求報道意向技術(shù)人請聯(lián)絡(luò) editor@51cto.com
出處:http://jartto.wang/2020/07/15/start-k8s/
【51CTO原創(chuàng)稿件,合作站點轉(zhuǎn)載請注明原文作者和出處為51CTO.com】