自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

K8S部署Redis單節(jié)點(diǎn)Rdb數(shù)據(jù)持久化故障演練恢復(fù)

作者：運(yùn)維小弟
開源 Redis
k8s全稱kubernetes，這個(gè)名字大家應(yīng)該都不陌生，k8s是為容器服務(wù)而生的一個(gè)可移植容器的編排管理工具，越來(lái)越多的公司正在擁抱k8s。

[[431421]]

環(huán)境：

K8S 部署redis單節(jié)點(diǎn)&rdb數(shù)據(jù)持久化&故障演練恢復(fù)

背景： 采用NFS存儲(chǔ)卷的方式 持久化存儲(chǔ)redis 需要保存的文件

一、部署NFS服務(wù)器

  1. #服務(wù)器安裝nfs服務(wù)，提供nfs存儲(chǔ)功能 
  2. 1、安裝nfs-utils 
  3. yum install nfs-utils (centos) 
  4. 或者  apt-get install nfs-kernel-server (ubuntu) 
  5.  
  6. 2、啟動(dòng)服務(wù) 
  7. systemctl enable nfs-server 
  8. systemctl start nfs-server 
  9.  
  10. 3、創(chuàng)建共享目錄完成共享配置 
  11. mkdir /home/nfs   #創(chuàng)建共享目錄 
  12.  
  13. 4、編輯共享配置 
  14. vim /etc/exports                                            
  15. #語(yǔ)法格式：    共享文件路徑     客戶機(jī)地址（權(quán)限）     #這里的客戶機(jī)地址可以是IP,網(wǎng)段，域名,也可以是任意* 
  16. /home/nfs  *(rw,async,no_root_squash) 
  1. 服務(wù)自檢命令  
  2. exportfs -arv 
  3.  
  4.  
  5. 5、重啟服務(wù) 
  6. systemctl restart nfs-server 
  7.  
  8.  
  9. 6、本機(jī)查看nfs 共享目錄 
  10. #showmount -e 服務(wù)器IP地址 (如果提示命令不存在，則需要yum install showmount) 
  11.  
  12. showmount -e 127.0.0.1 
  13. /home/nfs * 
  14.  
  15.  
  16.  
  17. 7、客戶端模擬掛載[所有k8s的節(jié)點(diǎn)都需要安裝客戶端] 
  18. [root@master-1 ~]# yum install nfs-utils （centos） 
  19. 或者  apt-get install nfs-common （ubuntu） 
  20. [root@master-1 ~]# mkdir /test 
  21. [root@master-1 ~]# mount -t nfs 172.16.201.209:/home/nfs /test 
  22.  
  23. #取消掛載 
  24. [root@master-1 ~]# umount /test 

二、配置PV 動(dòng)態(tài)供給(NFS StorageClass)，創(chuàng)建pvc

#部署NFS實(shí)現(xiàn)自動(dòng)創(chuàng)建PV插件： 一共設(shè)計(jì)到4個(gè)yaml 文件 ，官方的文檔有詳細(xì)的說明。

https://github.com/kubernetes-incubator/external-storage

K8S 部署redis單節(jié)點(diǎn)&rdb數(shù)據(jù)持久化&故障演練恢復(fù)
K8S 部署redis單節(jié)點(diǎn)&rdb數(shù)據(jù)持久化&故障演練恢復(fù)
  1. root@k8s-master1:~ # mkdir  /root/pvc 
  2. root@k8s-master1:~ # cd   /root/pvc 

 創(chuàng)建rbac.yaml 文件

  1. root@k8s-master1:pvc # cat rbac.yaml  
  2. kind: ServiceAccount 
  3. apiVersion: v1 
  4. metadata: 
  5.   name: nfs-client-provisioner 
  6. --- 
  7. kind: ClusterRole 
  8. apiVersion: rbac.authorization.k8s.io/v1 
  9. metadata: 
  10.   name: nfs-client-provisioner-runner 
  11. rules: 
  12.   - apiGroups: [""] 
  13.     resources: ["persistentvolumes"] 
  14.     verbs: ["get", "list", "watch", "create", "delete"] 
  15.   - apiGroups: [""] 
  16.     resources: ["persistentvolumeclaims"] 
  17.     verbs: ["get", "list", "watch", "update"] 
  18.   - apiGroups: ["storage.k8s.io"] 
  19.     resources: ["storageclasses"] 
  20.     verbs: ["get", "list", "watch"] 
  21.   - apiGroups: [""] 
  22.     resources: ["events"] 
  23.     verbs: ["create", "update", "patch"] 
  24. --- 
  25. kind: ClusterRoleBinding 
  26. apiVersion: rbac.authorization.k8s.io/v1 
  27. metadata: 
  28.   name: run-nfs-client-provisioner 
  29. subjects: 
  30.   - kind: ServiceAccount 
  31.     name: nfs-client-provisioner 
  32.     namespace: default 
  33. roleRef: 
  34.   kind: ClusterRole 
  35.   name: nfs-client-provisioner-runner 
  36.   apiGroup: rbac.authorization.k8s.io 
  37. --- 
  38. kind: Role 
  39. apiVersion: rbac.authorization.k8s.io/v1 
  40. metadata: 
  41.   name: leader-locking-nfs-client-provisioner 
  42. rules: 
  43.   - apiGroups: [""] 
  44.     resources: ["endpoints"] 
  45.     verbs: ["get", "list", "watch", "create", "update", "patch"] 
  46. --- 
  47. kind: RoleBinding 
  48. apiVersion: rbac.authorization.k8s.io/v1 
  49. metadata: 
  50.   name: leader-locking-nfs-client-provisioner 
  51. subjects: 
  52.   - kind: ServiceAccount 
  53.     name: nfs-client-provisioner 
  54.     # replace with namespace where provisioner is deployed 
  55.     namespace: default 
  56. roleRef: 
  57.   kind: Role 
  58.   name: leader-locking-nfs-client-provisioner 
  59.   apiGroup: rbac.authorization.k8s.io 

 創(chuàng)建deployment.yaml 文件

#官方默認(rèn)的鏡像地址，國(guó)內(nèi)可能無(wú)法下載，可以使用 image:

fxkjnj/nfs-client-provisioner:latest

#定義NFS 服務(wù)器的地址，共享目錄名稱

  1. root@k8s-master1:pvc # cat deployment.yaml  
  2. apiVersion: v1 
  3. kind: ServiceAccount 
  4. metadata: 
  5.   name: nfs-client-provisioner 
  6. --- 
  7. kind: Deployment 
  8. apiVersion: apps/v1  
  9. metadata: 
  10.   name: nfs-client-provisioner 
  11. spec: 
  12.   replicas: 1 
  13.   strategy: 
  14.     type: Recreate 
  15.   selector: 
  16.     matchLabels: 
  17.       app: nfs-client-provisioner 
  18.   template: 
  19.     metadata: 
  20.       labels: 
  21.         app: nfs-client-provisioner 
  22.     spec: 
  23.       serviceAccountName: nfs-client-provisioner 
  24.       containers: 
  25.         - name: nfs-client-provisioner 
  26.           image: fxkjnj/nfs-client-provisioner:latest 
  27.           volumeMounts: 
  28.             - name: nfs-client-root 
  29.               mountPath: /persistentvolumes 
  30.           env: 
  31.             - name: PROVISIONER_NAME 
  32.               value: fuseim.pri/ifs 
  33.             - name: NFS_SERVER 
  34.               value: 172.16.201.209  
  35.             - name: NFS_PATH 
  36.               value: /home/nfs 
  37.       volumes: 
  38.         - name: nfs-client-root 
  39.           nfs: 
  40.             server: 172.16.201.209 
  41.             path: /home/nfs 

 創(chuàng)建class.yaml

# archiveOnDelete: "true" 表示當(dāng)PVC 刪除后，后端數(shù)據(jù)不直接刪除，而是歸檔

  1. root@k8s-master1:pvc # cat class.yaml  
  2. apiVersion: storage.k8s.io/v1 
  3. kind: StorageClass 
  4. metadata: 
  5.   name: managed-nfs-storage 
  6. provisioner: fuseim.pri/ifs # or choose another name, must match deployment's env PROVISIONER_NAME' 
  7. parameters: 
  8.   archiveOnDelete: "true" 

創(chuàng)建pvc.yaml

#指定storageClassName 存儲(chǔ)卷的名字

# requests:

storage: 100Gi 指定需要多大的存儲(chǔ)

#注意，這里pvc ，我們創(chuàng)建在redis 命名空間下了，如果沒有redis 還需要先創(chuàng)建才行， kubectl create namespace redis

  1. root@k8s-master1:pvc # cat pvc.yaml  
  2. apiVersion: v1 
  3. kind: PersistentVolumeClaim 
  4. metadata: 
  5.   name: nfs-redis 
  6.   namespace: redis 
  7. spec: 
  8.   storageClassName: "managed-nfs-storage" 
  9.   accessModes: 
  10.     - ReadWriteMany      
  11.   resources: 
  12.     requests: 
  13.       storage: 100Gi 
  1. #部署 
  2. root@k8s-master1:pvc # kubectl apply -f . 
  3.  
  4.  
  5. #查看存儲(chǔ)卷 
  6. root@k8s-master1:pvc # kubectl  get sc 
  7. NAME                  PROVISIONER      RECLAIMPOLICY   VOLUMEBINDINGMODE   ALLOWVOLUMEEXPANSION   AGE 
  8. managed-nfs-storage   fuseim.pri/ifs   Delete          Immediate           false                  25h 
  9.  
  10.  
  11. #查看pvc 
  12. root@k8s-master1:pvc # kubectl  get pvc -n redis 
  13. NAME        STATUS   VOLUME                                     CAPACITY   ACCESS MODES   STORAGECLASS          AGE 
  14. nfs-redis   Bound    pvc-8eacbe25-3875-4f78-91ca-ba83b6967a8a   100Gi      RWX            managed-nfs-storage   21h 

三、編寫redis yaml 文件

  1. root@k8s-master1:~ # mkdir  /root/redis 
  2. root@k8s-master1:~ # cd /root/redis 

 編寫 redis.conf 配置文件，以configmap 的方式掛載到容器中

# require 配置redis 密碼

#save 5 1 ，表示 每5秒有一個(gè)key 變動(dòng) 就寫入到 dump.rdb 文件中

# appendonly no ，表示下次可以使用dump.rdb 來(lái)恢復(fù) redis 快照的數(shù)據(jù)

# 注意namespace 為redis

  1. root@k8s-master1: redis# cat redis-configmap-rdb.yml  
  2. kind: ConfigMap 
  3. apiVersion: v1 
  4. metadata: 
  5.   name: redis-config 
  6.   namespace: redis 
  7.   labels: 
  8.     app: redis 
  9. data: 
  10.     redis.conf: |- 
  11.     protected-mode no 
  12.     port 6379 
  13.     tcp-backlog 511 
  14.     timeout 0 
  15.     tcp-keepalive 300 
  16.     daemonize no 
  17.     supervised no 
  18.     pidfile /data/redis_6379.pid 
  19.     loglevel notice 
  20.     logfile "" 
  21.     databases 16 
  22.     always-show-logo yes 
  23.     save 5 1 
  24.     save 300 10 
  25.     save 60 10000 
  26.     stop-writes-on-bgsave-error yes 
  27.     rdbcompression yes 
  28.     rdbchecksum yes 
  29.     dbfilename dump.rdb 
  30.     dir /data 
  31.     replica-serve-stale-data yes 
  32.     replica-read-only yes 
  33.     repl-diskless-sync no 
  34.     repl-diskless-sync-delay 5 
  35.     repl-disable-tcp-nodelay no 
  36.     replica-priority 100 
  37.     requirepass 123 
  38.     lazyfree-lazy-eviction no 
  39.     lazyfree-lazy-expire no 
  40.     lazyfree-lazy-server-del no 
  41.     replica-lazy-flush no 
  42.     appendonly no 
  43.     appendfilename "appendonly.aof" 
  44.     appendfsync everysec 
  45.     no-appendfsync-on-rewrite no 
  46.     auto-aof-rewrite-percentage 100 
  47.     auto-aof-rewrite-min-size 64mb 
  48.     aof-load-truncated yes 
  49.     aof-use-rdb-preamble yes 
  50.     lua-time-limit 5000 
  51.     slowlog-log-slower-than 10000 
  52.     slowlog-max-len 128 
  53.     latency-monitor-threshold 0 
  54.     notify-keyspace-events "" 
  55.     hash-max-ziplist-entries 512 
  56.     hash-max-ziplist-value 64 
  57.     list-max-ziplist-size -2 
  58.     list-compress-depth 0 
  59.     set-max-intset-entries 512 
  60.     zset-max-ziplist-entries 128 
  61.     zset-max-ziplist-value 64 
  62.     hll-sparse-max-bytes 3000 
  63.     stream-node-max-bytes 4096 
  64.     stream-node-max-entries 100 
  65.     activerehashing yes 
  66.     client-output-buffer-limit normal 0 0 0 
  67.     client-output-buffer-limit replica 256mb 64mb 60 
  68.     client-output-buffer-limit pubsub 32mb 8mb 60 
  69.     hz 10 
  70.     dynamic-hz yes 
  71.     aof-rewrite-incremental-fsync yes 
  72.     rdb-save-incremental-fsync yes 

 編寫 redis-deployment.yml

#注意namespace 為redis

  1. root@k8s-master1: redis# cat redis-deployment.yml  
  2. apiVersion: apps/v1 
  3. kind: Deployment 
  4. metadata: 
  5.   name: redis 
  6.   namespace: redis 
  7.   labels: 
  8.     app: redis 
  9. spec: 
  10.   replicas: 3 
  11.   selector: 
  12.     matchLabels: 
  13.       app: redis 
  14.   template: 
  15.     metadata: 
  16.       labels: 
  17.         app: redis 
  18.     spec: 
  19.       # 進(jìn)行初始化操作，修改系統(tǒng)配置，解決 Redis 啟動(dòng)時(shí)提示的警告信息 
  20.       initContainers: 
  21.         - name: system-init 
  22.           image: busybox:1.32 
  23.           imagePullPolicy: IfNotPresent 
  24.           command: 
  25.             - "sh" 
  26.             - "-c" 
  27.             - "echo 2048 > /proc/sys/net/core/somaxconn && echo never > /sys/kernel/mm/transparent_hugepage/enabled" 
  28.           securityContext: 
  29.             privileged: true 
  30.             runAsUser: 0 
  31.           volumeMounts: 
  32.           - name: sys 
  33.             mountPath: /sys 
  34.       containers: 
  35.         - name: redis 
  36.           image: redis:5.0.8 
  37.           command: 
  38.             - "sh" 
  39.             - "-c" 
  40.             - "redis-server /usr/local/etc/redis/redis.conf" 
  41.           ports: 
  42.             - containerPort: 6379 
  43.           resources: 
  44.             limits: 
  45.               cpu: 1000m 
  46.               memory: 1024Mi 
  47.             requests: 
  48.               cpu: 1000m 
  49.               memory: 1024Mi 
  50.           livenessProbe: 
  51.             tcpSocket: 
  52.               port: 6379 
  53.             initialDelaySeconds: 300 
  54.             timeoutSeconds: 1 
  55.             periodSeconds: 10 
  56.             successThreshold: 1 
  57.             failureThreshold: 3 
  58.           readinessProbe: 
  59.             tcpSocket: 
  60.               port: 6379 
  61.             initialDelaySeconds: 5 
  62.             timeoutSeconds: 1 
  63.             periodSeconds: 10 
  64.             successThreshold: 1 
  65.             failureThreshold: 3 
  66.           volumeMounts: 
  67.             - name: data 
  68.               mountPath: /data 
  69.             - name: config 
  70.               mountPath: /usr/local/etc/redis/redis.conf 
  71.               subPath: redis.conf 
  72.       volumes: 
  73.         - name: data 
  74.           persistentVolumeClaim: 
  75.             claimName: nfs-redis 
  76.         - name: config 
  77.           configMap: 
  78.             name: redis-config 
  79.         - name: sys 
  80.           hostPath: 
  81.             path: /sys 

編寫 redis-service.yml

#注意namespace 為redis

  1. #部署 
  2. root@k8s-master1:~/kubernetes/redis# kubectl get pod -n redis 
  3. NAME                     READY   STATUS    RESTARTS   AGE 
  4. redis-65f75db6bc-5skgr   1/1     Running   0          21h 
  5. redis-65f75db6bc-75m8m   1/1     Running   0          21h 
  6. redis-65f75db6bc-cp6cx   1/1     Running   0          21h 
  7.  
  8. root@k8s-master1:~/kubernetes/redis# kubectl get svc -n redis 
  9. NAME          TYPE       CLUSTER-IP   EXTERNAL-IP   PORT(S)          AGE 
  10. redis-front   NodePort   10.0.0.169   <none>        6379:36379/TCP   22h 

四、測(cè)試，訪問

使用redis 客戶端工具，寫入幾個(gè)KEY 測(cè)試

K8S 部署redis單節(jié)點(diǎn)&rdb數(shù)據(jù)持久化&故障演練恢復(fù)
K8S 部署redis單節(jié)點(diǎn)&rdb數(shù)據(jù)持久化&故障演練恢復(fù)

刪除pod，在自動(dòng)新建pod后，查詢鍵值是否存在

  1. root@k8s-master1:~# kubectl get pods -n redis 
  2. NAME                     READY   STATUS    RESTARTS   AGE 
  3. redis-65f75db6bc-5skgr   1/1     Running   0          5d20h 
  4. redis-65f75db6bc-75m8m   1/1     Running   0          5d20h 
  5. redis-65f75db6bc-cp6cx   1/1     Running   0          5d20h 
  6.  
  7. root@k8s-master1:~# kubectl delete -n redis pod redis-65f75db6bc-5skgr  
  8. pod "redis-65f75db6bc-5skgr" deleted 
  9.  
  10.  
  11. #刪除pod后，根據(jù)副本數(shù)，又重新拉取新的pod生成 
  12. root@k8s-master1:~# kubectl get pods -n redis 
  13. NAME                     READY   STATUS    RESTARTS   AGE 
  14. redis-65f75db6bc-tnnxp   1/1     Running   0          54s 
  15. redis-65f75db6bc-75m8m   1/1     Running   0          5d20h 
  16. redis-65f75db6bc-cp6cx   1/1     Running   0          5d20h 
K8S 部署redis單節(jié)點(diǎn)&rdb數(shù)據(jù)持久化&故障演練恢復(fù)

查看nfs共享目錄下是否存在 dump.rdb

K8S 部署redis單節(jié)點(diǎn)&rdb數(shù)據(jù)持久化&故障演練恢復(fù)

五、故障演練恢復(fù)

(1)數(shù)據(jù)備份

源redis配置有持久化，直接拷貝持久化目錄下的dump.rdb

直接到持久化的目錄下，拷貝走dump.rdb 文件

源redis不支持持久化，則進(jìn)入容器生成dump.rdb并拷出

進(jìn)入容器：kubectl exec -it redis-xxx /bin/bash -n redis

進(jìn)入redis命令臺(tái)：redis-cli

密碼認(rèn)證：auth 123

保存數(shù)據(jù)，生成dump.rdb文件：save

退出redis命令臺(tái)：quit

退出容器：exit

從容器中取出數(shù)據(jù)到本地：kubectl cp -n redis Pod_Name:/data/dump.rdb ./

傳輸至遠(yuǎn)程主機(jī)：scp dump.rdb root@目標(biāo)服務(wù)器:/目錄

(2)數(shù)據(jù)恢復(fù)

  • 停止redis,直接刪除創(chuàng)建的deployment
  • 拷貝dump.rdb至目標(biāo)redis的持久化目錄下(注：將覆蓋目標(biāo)redis的數(shù)據(jù))
  • 重啟pod：kubectl apply -f redis-deployment.yml
  1. #拷貝持久化目錄下的dump.rbd文件 到root 下 
  2. cp dump.rdb /root 
  3.  
  4. #停止redis,也就是刪除deployment 
  5. root@k8s-master1:~/kubernetes/redis# kubectl delete -f redis-deployment.yml  
  6. deployment.apps "redis" deleted 
  7.  
  8. root@k8s-master1:~/kubernetes/redis# kubectl  get pods -n redis 
  9. No resources found in redis namespace. 
  10.  
  11. #拷貝dump.rdb至目標(biāo)redis的持久化目錄下 
  12. cp /root/dump.rdb   /home/nfs/redis-nfs-redis-pvc-8eacbe25-3875-4f78-91ca-ba83b6967a8a 
  13.  
  14. #重啟pod 
  15. root@k8s-master1:~/kubernetes/redis# kubectl apply -f redis-deployment.yml  
  16. deployment.apps/redis created 
  17.  
  18. root@k8s-master1:~/kubernetes/redis# kubectl  get pods -n redis 
  19. NAME                     READY   STATUS     RESTARTS   AGE 
  20. redis-65f75db6bc-5jx4m   0/1     Init:0/1   0          3s 
  21. redis-65f75db6bc-68jf5   0/1     Init:0/1   0          3s 
  22. redis-65f75db6bc-b9gvk   0/1     Init:0/1   0          3s 
  23.  
  24. root@k8s-master1:~/kubernetes/redis# kubectl  get pods -n redis 
  25. NAME                     READY   STATUS    RESTARTS   AGE 
  26. redis-65f75db6bc-5jx4m   1/1     Running   0          20s 
  27. redis-65f75db6bc-68jf5   1/1     Running   0          20s 
  28. redis-65f75db6bc-b9gvk   1/1     Running   0          20s 

(3)驗(yàn)證數(shù)據(jù)，可發(fā)現(xiàn)源redis的數(shù)據(jù)已全部復(fù)現(xiàn)

K8S 部署redis單節(jié)點(diǎn)&rdb數(shù)據(jù)持久化&故障演練恢復(fù)

 

責(zé)任編輯：姜華 來(lái)源： 今日頭條
K8SRedis數(shù)據(jù)持久化
相關(guān)推薦

2018-12-14 09:48:23

Redis數(shù)據(jù)故障

2024-09-29 09:25:53

2024-12-20 12:15:06

RedisRDB持久化

2023-05-11 09:12:35

RedisRDB日志

2024-03-12 15:47:12

Kubernetes容器K8S

2021-07-18 07:59:42

RedisRDBAOF

2024-01-07 19:43:50

K8S節(jié)點(diǎn)

2024-03-26 00:03:08

Redis數(shù)據(jù)RDB

2022-01-22 21:38:19

K8SRedisRedis clus

2022-02-08 15:59:29

k3sk8sDevOps

2023-09-06 08:12:04

k8s云原生

2022-04-22 13:32:01

K8s容器引擎架構(gòu)

2022-11-06 21:31:11

云原生Sentinel集群模式

2021-04-23 08:35:16

k8s故障檢測(cè)

2019-05-17 08:55:49

RedisRDBAOF

2019-11-18 16:20:48

RedisRDB數(shù)據(jù)庫(kù)

2024-09-12 08:49:53

2023-04-30 00:02:40

K8Skubelet數(shù)據(jù)

2023-07-11 07:12:21

Hadoop部署mysql

2023-07-10 07:22:16

點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)