kubernetes系列教程（七）深入玩轉(zhuǎn)pod調(diào)度-創(chuàng)新互聯(lián)

關(guān)于作者劉海平（HappyLau ）云計算高級顧問目前在騰訊云從事公有云相關(guān)工作，曾就職于酷狗，EasyStack，擁有多年公有云+私有云計算架構(gòu)設(shè)計，運(yùn)維，交付相關(guān)經(jīng)驗，參與了酷狗，南方電網(wǎng)，國泰君安等大型私有云平臺建設(shè)，精通Linux，Kubernetes，OpenStack，Ceph等開源技術(shù)，在云計算領(lǐng)域具有豐富實(shí)戰(zhàn)經(jīng)驗，擁有RHCA/OpenStack/Linux授課經(jīng)驗。
創(chuàng)新互聯(lián)建站專注為客戶提供全方位的互聯(lián)網(wǎng)綜合服務(wù)，包含不限于網(wǎng)站制作、做網(wǎng)站、烏拉特中網(wǎng)絡(luò)推廣、成都小程序開發(fā)、烏拉特中網(wǎng)絡(luò)營銷、烏拉特中企業(yè)策劃、烏拉特中品牌公關(guān)、搜索引擎seo、人物專訪、企業(yè)宣傳片、企業(yè)代運(yùn)營等，從售前售中售后，我們都將竭誠為您服務(wù)，您的肯定，是我們大的嘉獎；創(chuàng)新互聯(lián)建站為所有大學(xué)生創(chuàng)業(yè)者提供烏拉特中建站搭建服務(wù)，24小時服務(wù)熱線：028-86922220，官方網(wǎng)址：www.cdcxhl.com

寫在前面

上一篇文章中kubernetes系列教程（六）kubernetes資源管理和服務(wù)質(zhì)量初步介紹了kubernetes中的resource資源調(diào)度和服務(wù)質(zhì)量Qos，介紹了kubernetes中如何定義pod的資源和資源調(diào)度，以及設(shè)置resource之后的優(yōu)先級別Qos，接下來介紹kubernetes系列教程pod的調(diào)度機(jī)制。

1. Pod調(diào)度

1.1 pod調(diào)度概述

kubernets是容器編排引擎，其中最主要的一個功能是容器的調(diào)度，通過kube-scheduler實(shí)現(xiàn)容器的完全自動化調(diào)度，調(diào)度周期分為：調(diào)度周期Scheduling Cycle和綁定周期Binding Cycle，其中調(diào)度周期細(xì)分為過濾filter和weight稱重，按照指定的調(diào)度策略將滿足運(yùn)行pod節(jié)點(diǎn)的node賽選出來，然后進(jìn)行排序；綁定周期是經(jīng)過kube-scheduler調(diào)度優(yōu)選的pod后，由特定的node節(jié)點(diǎn)watch然后通過kubelet運(yùn)行。

kubernetes系列教程（七）深入玩轉(zhuǎn)pod調(diào)度

過濾階段包含預(yù)選Predicate和scoring排序，預(yù)選是篩選滿足條件的node，排序是最滿足條件的node打分并排序，預(yù)選的算法包含有：

CheckNodeConditionPred 節(jié)點(diǎn)是否ready
MemoryPressure 節(jié)點(diǎn)內(nèi)存是否壓力大（內(nèi)存是否足夠）
DiskPressure 節(jié)點(diǎn)磁盤壓力是否大（空間是否足夠）
PIDPressure 節(jié)點(diǎn)Pid是否有壓力（Pid進(jìn)程是否足夠）
GeneralPred 匹配pod.spec.hostname字段
MatchNodeSelector 匹配pod.spec.nodeSelector標(biāo)簽
PodFitsResources 判斷resource定義的資源是否滿足
PodToleratesNodeTaints 能容忍的污點(diǎn)pod.spec.tolerations
CheckNodeLabelPresence
CheckServiceAffinity
CheckVolumeBinding
NoVolumeZoneConflict

過濾條件需要檢查node上滿足的條件，可以通過kubectl describe node node-id方式查看，如下圖：

kubernetes系列教程（七）深入玩轉(zhuǎn)pod調(diào)度

優(yōu)選調(diào)度算法有：

least_requested 資源消耗最小的節(jié)點(diǎn)
balanced_resource_allocation 各項資源消耗最均勻的節(jié)點(diǎn)
node_prefer_avoid_pods 節(jié)點(diǎn)傾向
taint_toleration 污點(diǎn)檢測，檢測有污點(diǎn)條件的node，得分越低
selector_spreading 節(jié)點(diǎn)selector
interpod_affinity pod親和力遍歷
most_requested 資源消耗大的節(jié)點(diǎn)
node_label node標(biāo)簽

1. 2 指定nodeName調(diào)度

nodeName是PodSpec中的一個字段，可以通過pod.spec.nodeName指定將pod調(diào)度到某個具體的node節(jié)點(diǎn)上，該字段比較特殊一般都為空，如果有設(shè)置nodeName字段，kube-scheduler會直接跳過調(diào)度，在特定節(jié)點(diǎn)上通過kubelet啟動pod。通過nodeName調(diào)度并非是集群的智能調(diào)度，通過指定調(diào)度的方式可能會存在資源不均勻的情況，建議設(shè)置Guaranteed的Qos，防止資源不均時候Pod被驅(qū)逐evince。如下以創(chuàng)建一個pod運(yùn)行在node-3上為例：

編寫yaml將pod指定在node-3節(jié)點(diǎn)上運(yùn)行

[root@node-1 demo]# cat nginx-nodeName.yaml 
apiVersion: v1
kind: Pod
metadata:
  name: nginx-run-on-nodename
  annotations:
    kubernetes.io/description: "Running the Pod on specific nodeName"
spec:
  containers:
  - name: nginx-run-on-nodename
    image: nginx:latest
    ports:
    - name: http-80-port
      protocol: TCP
      containerPort: 80 
  nodeName: node-3       #通過nodeName指定將nginx-run-on-nodename運(yùn)行在特定節(jié)點(diǎn)node-3上

運(yùn)行yaml配置使之生效

[root@node-1 demo]# kubectl apply -f nginx-nodeName.yaml 
pod/nginx-run-on-nodename created

查看確認(rèn)pod的運(yùn)行情況，已運(yùn)行在node-3節(jié)點(diǎn)

[root@node-1 demo]# kubectl get pods nginx-run-on-nodename -o wide 
NAME                    READY   STATUS    RESTARTS   AGE     IP            NODE     NOMINATED NODE   READINESS GATES
nginx-run-on-nodename   1/1     Running   0          6m52s   10.244.2.15   node-3

1.2. 通過nodeSelector調(diào)度

nodeSelector是PodSpec中的一個字段，nodeSelector是最簡單實(shí)現(xiàn)將pod運(yùn)行在特定node節(jié)點(diǎn)的實(shí)現(xiàn)方式，其通過指定key和value鍵值對的方式實(shí)現(xiàn)，需要node設(shè)置上匹配的Labels，節(jié)點(diǎn)調(diào)度的時候指定上特定的labels即可。如下以node-2添加一個app:web的labels，調(diào)度pod的時候通過nodeSelector選擇該labels：

給node-2添加labels

[root@node-1 demo]# kubectl label node node-2 app=web
node/node-2 labeled

查看校驗labels設(shè)置情況，node-2增加多了一個app=web的labels

[root@node-1 demo]# kubectl get nodes --show-labels 
NAME     STATUS   ROLES    AGE   VERSION   LABELS
node-1   Ready    master   15d   v1.15.3   beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,kubernetes.io/arch=amd64,kubernetes.io/hostname=node-1,kubernetes.io/os=linux,node-role.kubernetes.io/master=
node-2   Ready       15d   v1.15.3   app=web,beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,kubernetes.io/arch=amd64,kubernetes.io/hostname=node-2,kubernetes.io/os=linux
node-3   Ready       15d   v1.15.3   beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,kubernetes.io/arch=amd64,kubernetes.io/hostname=node-3,kubernetes.io/os=linux

通過nodeSelector將pod調(diào)度到app=web所屬的labels

[root@node-1 demo]# cat nginx-nodeselector.yaml 
apiVersion: v1
kind: Pod
metadata:
  name: nginx-run-on-nodeselector
  annotations:
    kubernetes.io/description: "Running the Pod on specific node by nodeSelector"
spec:
  containers:
  - name: nginx-run-on-nodeselector
    image: nginx:latest
    ports:
    - name: http-80-port
      protocol: TCP
      containerPort: 80 
  nodeSelector:     #通過nodeSelector將pod調(diào)度到特定的labels
    app: web

應(yīng)用yaml文件生成pod

[root@node-1 demo]# kubectl apply -f nginx-nodeselector.yaml 
pod/nginx-run-on-nodeselector created

檢查驗證pod的運(yùn)行情況，已經(jīng)運(yùn)行在node-2節(jié)點(diǎn)

[root@node-1 demo]# kubectl get pods nginx-run-on-nodeselector -o wide 
NAME                        READY   STATUS    RESTARTS   AGE   IP            NODE     NOMINATED NODE   READINESS GATES
nginx-run-on-nodeselector   1/1     Running   0          51s   10.244.1.24   node-2

系統(tǒng)默認(rèn)預(yù)先定義有多種內(nèi)置的labels，這些labels可以標(biāo)識node的屬性，如arch架構(gòu)，操作系統(tǒng)類型，主機(jī)名等

beta.kubernetes.io/arch=amd64
beta.kubernetes.io/os=linux
kubernetes.io/arch=amd64
kubernetes.io/hostname=node-3
kubernetes.io/os=linux

1.3 node Affinity and anti-affinity

affinity/anti-affinity和nodeSelector功能相類似，相比于nodeSelector，affinity的功能更加豐富，未來會取代nodeSelector，affinity增加了如下的一些功能增強(qiáng)：

表達(dá)式更加豐富，匹配方式支持多樣，如In,NotIn, Exists, DoesNotExist. Gt, and Lt；
可指定soft和preference規(guī)則，soft表示需要滿足的條件，通過requiredDuringSchedulingIgnoredDuringExecution來設(shè)置，preference則是優(yōu)選選擇條件，通過preferredDuringSchedulingIgnoredDuringExecution指定
affinity提供兩種級別的親和和反親和：基于node的node affinity和基于pod的inter-pod affinity/anti-affinity，node affinity是通過node上的labels來實(shí)現(xiàn)親和力的調(diào)度，而pod affinity則是通過pod上的labels實(shí)現(xiàn)親和力的調(diào)度，兩者作用的范圍有所不同。

下面通過一個例子來演示node affinity的使用，requiredDuringSchedulingIgnoredDuringExecution指定需要滿足的條件，preferredDuringSchedulingIgnoredDuringExecution指定優(yōu)選的條件，兩者之間取與關(guān)系。

查詢node節(jié)點(diǎn)的labels，默認(rèn)包含有多個labels，如kubernetes.io/hostname

[root@node-1 ~]# kubectl get nodes --show-labels 
NAME  STATUS  ROLES AGE  VERSION  LABELS
node-1  Ready master  15d  v1.15.3  beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,kubernetes.io/arch=amd64,kubernetes.io/hostname=node-1,kubernetes.io/os=linux,node-role.kubernetes.io/master=
node-2  Ready   15d  v1.15.3  app=web,beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,kubernetes.io/arch=amd64,kubernetes.io/hostname=node-2,kubernetes.io/os=linux
node-3  Ready   15d  v1.15.3  beta.kubernetes.io/arch=amd64,beta.kubernetes.io/os=linux,kubernetes.io/arch=amd64,kubernetes.io/hostname=node-3,kubernetes.io/os=linux

通過node affiinity實(shí)現(xiàn)調(diào)度，通過requiredDuringSchedulingIgnoredDuringExecution指定滿足條件kubernetes.io/hostname為node-2和node-3，通過preferredDuringSchedulingIgnoredDuringExecution優(yōu)選條件需滿足app=web的labels

[root@node-1 demo]# cat nginx-node-affinity.yaml 
apiVersion: v1
kind: Pod
metadata:
  name: nginx-run-node-affinity
  annotations:
    kubernetes.io/description: "Running the Pod on specific node by node affinity"
spec:
  containers:
  - name: nginx-run-node-affinity
    image: nginx:latest
    ports:
    - name: http-80-port
      protocol: TCP
      containerPort: 80 
  affinity:
    nodeAffinity:
      requiredDuringSchedulingIgnoredDuringExecution:
        nodeSelectorTerms:
        - matchExpressions:
          - key: kubernetes.io/hostname
            operator: In
            values:
            - node-1
            - node-2
            - node-3
      preferredDuringSchedulingIgnoredDuringExecution:
      - weight: 1
        preference:
          matchExpressions:
          - key: app
            operator: In
            values: ["web"]

應(yīng)用yaml文件生成pod

[root@node-1 demo]# kubectl apply -f nginx-node-affinity.yaml 
pod/nginx-run-node-affinity created

確認(rèn)pod所屬的node節(jié)點(diǎn)，滿足require和 preferre條件的節(jié)點(diǎn)是node-2

[root@node-1 demo]# kubectl get pods --show-labels nginx-run-node-affinity -o wide 
NAME                      READY   STATUS    RESTARTS   AGE    IP            NODE     NOMINATED NODE   READINESS GATES   LABELS
nginx-run-node-affinity   1/1     Running   0          106s   10.244.1.25   node-2

寫在最后

本文介紹了kubernetes中的調(diào)度機(jī)制，默認(rèn)創(chuàng)建pod是全自動調(diào)度機(jī)制，調(diào)度由kube-scheduler實(shí)現(xiàn)，調(diào)度過程分為兩個階段調(diào)度階段（過濾和沉重排序）和綁定階段（在node上運(yùn)行pod）。通過干預(yù)有四種方式：

指定nodeName
通過nodeSelector
通過node affinity和anti-affinity
通過pod affinity和anti-affinity

附錄

調(diào)度框架介紹：https://kubernetes.io/docs/concepts/configuration/scheduling-framework/

Pod調(diào)度方法：https://kubernetes.io/docs/concepts/configuration/assign-pod-node/

當(dāng)你的才華撐不起你的野心時，你就應(yīng)該靜下心來學(xué)習(xí)

返回kubernetes系列教程目錄

網(wǎng)站標(biāo)題：kubernetes系列教程（七）深入玩轉(zhuǎn)pod調(diào)度-創(chuàng)新互聯(lián)
瀏覽地址：http://weahome.cn/article/dejche.html

真实的国产乱ⅩXXX66竹夫人,五月香六月婷婷激情综合,亚洲日本VA一区二区三区,亚洲精品一区二区三区麻豆

kubernetes系列教程（七）深入玩轉(zhuǎn)pod調(diào)度-創(chuàng)新互聯(lián)

寫在前面

1. Pod調(diào)度

1.1 pod調(diào)度概述

1. 2 指定nodeName調(diào)度

1.2. 通過nodeSelector調(diào)度

1.3 node Affinity and anti-affinity

寫在最后

附錄

其他資訊

網(wǎng)站制作

企業(yè)服務(wù)

網(wǎng)站建設(shè)

服務(wù)器托管