[Instalación de Rabbitmq en k8s] Instalación de Rabbitmq y construcción de un clúster espejo en K8s-pvc version

[Instalar Rabbitmq en k8s] Instale Rabbitmq y cree un clúster espejo en K8s - versión PVC

2024-07-12

Directorio de artículos

Introducción

El clúster RabbitMQ creado en este artículo está construido en forma de Rabbitmq_peer_discovery_k8s. El complemento lee automáticamente la información del nodo de la API de K8s y construye el clúster RabbitMQ. El método de construcción es un conjunto con estado y tres copias, por lo que los datos deben estar garantizados. La persistencia puede tomar la forma de ruta de host + afinidad de nodo, o puede tomar la forma de pvc. Este artículo describirá el uso de pvc para conservar datos.

1. Condiciones y descripción del entorno.

La versión k8s-1.29.4 de k8s está construida en forma de almacenamiento compartido. El almacenamiento compartido tiene la forma de root-ceph autoconstruido. Si se trata de un clúster que utiliza Alibaba Cloud, la persistencia de los datos se puede lograr montando un disco duro. almacenamiento en disco, nas o de objetos, la desventaja de utilizar almacenamiento compartido es el problema común de un rendimiento deficiente de lectura y escritura.

4.2. Crear configuración del mapa de configuración

Guarde la siguiente configuración en autotest-rabbitmq-config.yaml, configure el vhost predeterminado y la contraseña de usuario en la configuración e inicialice la información del nodo del clúster [planifique el nombre del nodo antes de la instalación].

apiVersion: v1
kind: ConfigMap
metadata:
  name: autozx-rabbitmq-config
  namespace: zx-app
  labels:
    appname: pcauto-zx
    app: autozx-rabbitmq-config 
data:
  enabled_plugins: |
    [rabbitmq_management,rabbitmq_peer_discovery_k8s].
  rabbitmq.conf: |
    cluster_name = autozx-rabbitmq
    listeners.tcp.default = 5672
    
    default_vhost = /
    default_user = admin
    default_pass = pconline

    default_user_tags.administrator = true
    default_user_tags.management = true
    default_user_tags.custom_tag = true

    channel_max = 1024
    tcp_listen_options.backlog = 2048

    cluster_formation.peer_discovery_backend = rabbit_peer_discovery_k8s
    cluster_formation.k8s.host = kubernetes.default.svc.cluster.local
    cluster_formation.k8s.address_type = hostname
    cluster_formation.node_cleanup.interval = 30
    cluster_formation.node_cleanup.only_log_warning = true

    cluster_partition_handling = autoheal

    queue_master_locator=min-masters
    loopback_users.guest = false
    cluster_formation.k8s.hostname_suffix = .autozx-rabbitmq.zx-app.svc.cluster.local
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37

4.3. Crear configuraciones sin cabeza de servicio y conjunto de estado

Toma 3 copias

apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: autozx-rabbitmq 
  namespace: zx-app 
  labels:
    appname: pcauto-zx
    app: autozx-rabbitmq
spec:
  serviceName: "autozx-rabbitmq"
  replicas: 3
  selector:
    matchLabels:
      app: autozx-rabbitmq
  template:
    metadata:
      labels:
        app: autozx-rabbitmq
    spec:
      containers:
      - name: rabbitmq-server
        image: pcgroup-registry-vpc.cn-shenzhen.cr.aliyuncs.com/public/rabbitmq:3.12.14-management 
        imagePullPolicy: IfNotPresent
        env:
        - name: RABBITMQ_ERLANG_COOKIE
          value: "YZSDHWMFSMKEMBDHSGGZ"
        - name: K8S_SERVICE_NAME
          value: autozx-rabbitmq 
        - name: POD_IP
          valueFrom:
            fieldRef:
              fieldPath: status.podIP
        - name: POD_NAME
          valueFrom:
            fieldRef:
              fieldPath: metadata.name
        - name: POD_NAMESPACE
          valueFrom:
            fieldRef:
              fieldPath: metadata.namespace
        - name: RABBITMQ_USE_LONGNAME
          value: "true"
        - name: RABBITMQ_NODENAME
          value: rabbit@$(POD_NAME).$(K8S_SERVICE_NAME).$(POD_NAMESPACE).svc.cluster.local
        ports:
        - name: http
          containerPort: 15672 
        - name: amqp
          containerPort: 5672 
        readinessProbe:
          exec:
            command:
            - rabbitmq-diagnostics
            - status
          initialDelaySeconds: 20
          periodSeconds: 60
          timeoutSeconds: 10
        volumeMounts:
        - name: rbmq-data
          mountPath: /var/lib/rabbitmq
        - name: rabbitmq-config-volume
          mountPath: /etc/rabbitmq/ 
      restartPolicy: Always 
      serviceAccountName: rabbitmq-cluster
      terminationGracePeriodSeconds: 30
      volumes:
        - name: rabbitmq-config-volume
          configMap:
            name: autozx-rabbitmq-config
  volumeClaimTemplates:
  - metadata:
      name: rbmq-data
    spec:
      accessModes:
      - ReadWriteMany
      storageClassName: example-storageclass
      resources:
        requests:
          storage: 20Gi
---
apiVersion: v1
kind: Service
metadata:
  name: autozx-rabbitmq
  namespace: zx-app
  labels:
    appname: pcauto-zx
    app: autozx-rabbitmq
spec:
  ports:
  - port: 5672
  clusterIP: None
  selector:
    app: autozx-rabbitmq
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94

Nota: Si desea evitar asignar el mismo pod al mismo nodo, puede agregar la siguiente configuración:

      affinity:
        podAntiAffinity:
          requiredDuringSchedulingIgnoredDuringExecution:
            - labelSelector:
                matchExpressions:
                  - key: "app"
                    operator: In
                    values:
                      - autozx-rabbitmq
              topologyKey: "kubernetes.io/hostname"
1
2
3
4
5
6
7
8
9
10

4.4. Configuración de autorización

Configure serviceAccount, role y RoleBinding para autorizar a statefulset a leer la información del nodo

apiVersion: v1
kind: Service
metadata:
  name: autozx-rabbitmq-manage
  namespace: zx-app
  labels:
    app: autozx-rabbitmq-manage
    appname: pcauto-zx
spec:
  ports:
  - port: 5672
    name: amqp
  - port: 15672
    name: http
  selector:
    app: autozx-rabbitmq
  type: LoadBalancer 
[root@autobbs-docker-240-213 rabbitmq]# cat rbac.yaml
apiVersion: v1
kind: ServiceAccount
metadata:
  name: rabbitmq-cluster
  namespace: zx-app
---
kind: Role
apiVersion: rbac.authorization.k8s.io/v1
metadata:
  name: rabbitmq-cluster
  namespace: zx-app
rules:
- apiGroups: [""]
  resources: ["endpoints"]
  verbs: ["get"]
---
kind: RoleBinding
apiVersion: rbac.authorization.k8s.io/v1
metadata:
  name: rabbitmq-cluster
  namespace: zx-app
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: Role
  name: rabbitmq-cluster
subjects:
- kind: ServiceAccount
  name: rabbitmq-cluster
  namespace: zx-app
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47

4.5. Crear configuración de servicio

Configure un servicio de proxy de servicio para el puerto amqp 5672 y el puerto de administración 15672.

apiVersion: v1
kind: Service
metadata:
  name: autozx-rabbitmq-manage
  namespace: zx-app
  labels:
    app: autozx-rabbitmq-manage
    appname: pcauto-zx
spec:
  ports:
  - port: 5672
    name: amqp
  - port: 15672
    name: http
  selector:
    app: autozx-rabbitmq
  type: LoadBalancer 
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17

5. Configuración después de la instalación

Configure el clúster Rabbitmq en un clúster espejo de 3 nodos. Después de completar el paso 4.4, puede iniciar sesión en la consola a través de la IP del balanceador de carga: http://ip:15672 y usar default_user y default_pass configurados en el mapa de configuración. acceso.

Configuración del modo espejo:

Después de configurar:

El modo de duplicación se puede configurar con el comando:
Configure el comando de ejecución de imagen del vhost de demostración:
rabbitmqctl set_policy -p demo ha-all "^" '{"ha-mode":"all","ha-sync-mode":"automatic"}'
Configure el modo de duplicación para vhost/ predeterminado:
rabbitmqctl set_policy ha-all "^" '{"ha-mode":"all","ha-sync-mode":"automatic"}'

6. Instrucciones de instalación

Antes de usar la configuración, reemplace autozx en la configuración con el nombre que necesita. El espacio de nombres configurado es: zx-app, cámbielo a su propio espacio de nombres, appname es pcauto-zx, cámbielo a su propio nombre de aplicación, esta etiqueta también puede. ser eliminado.
La dirección espejo en la configuración utiliza una dirección espejo privada. La administración espejo se descarga de dockerhub y se refleja en el almacén espejo privado. Si puede conectarse directamente a k8 en la red externa, Rabbitmq:3.12.14. -La gestión se puede utilizar directamente. De lo contrario, configure una dirección reflejada aceptable.
El nombre de usuario y la contraseña predeterminados son admin.
La clase de almacenamiento en la plantilla de PVC: example-storageclass se modifica a su propia clase de almacenamiento
"5. Configuración después de la instalación" Dado que los métodos de configuración son los mismos, se utiliza la captura de pantalla del artículo anterior.

Compartir tecnología