小编点评

## 容器化应用系统镜像检查指南 **1. 镜像LANG配置** * 使用 `LANG = en_US.UTF-8` 设置镜像语言。 * 避免 `docker run -v` 中的语言配置。 **2. 检查镜像时区配置** * 使用 `TZ=Asia/Shanghai` 设置镜像时区。 * 避免在 `docker run` 中设置时区。 **3. 配置其他特权** * 使用 `--privileged` 等参数运行容器。 * 使用 `--name` 等参数指定容器名称。 **4. 版本控制** * 使用标签或版本号作为镜像名。 * 可以根据需要设置 `minAvailable` 和 `maxUnavailable` 等参数。 **5. 其他配置** * 设置 `Redis/Kafka/RabbitMQ 集群` (并配置 exporter 监控)。 * 设置 `JMX-exporter` 监控和 Tracing 监控。 * 配置 `NGINX` conf 中 `worker_processes` 设置。 * 设置 `PDB` 和 `podAntiAffinity` 等参数。 * 确保同一组微服务/应用/组件尽可能打散在不同 node 上。 **6. 配置容器** * 使用 `nodeSelector` 设置容器分布。 * 使用 `minAvailable` 和 `maxUnavailable` 等参数限制容器数量。 * 使用 `podAntiAffinity` 设置容器 anti-affinity。

正文

前言

最近忙的要死, 👻👻👻. 上一周来了一次比 996 更猛的 907. 这周二终于有点遭不住了, 调休一天, 稍微歇息一下.

同时手痒的不行, 把筹备了好久的重磅文章发上来哈哈. 😆😆😆

不过时间还是有点仓促, 所以这次就先开个头, 后面有时间再细化.

容器化应用系统上生产的最佳实践

1. 检查镜像、容器是否是用root启动以及配置其他特权. 如无必要, 一律使用普通用户.
2. 检查镜像LANG配置: LANG = en_US.UTF-8. 目的: 避免生产出现 乱码等问题
3. 检查镜像时区配置: TZ=Asia/Shanghai 目的: 避免生产出现时区不一致的问题
4. 配置外部化. 外部化手段有多种:
5. 同一个镜像, 从测试流转到生产. 给镜像打${version}或${gitCommitId}这一类的标签. 目的: 通过版本号或 commit id, 保证正确地的版本流转到生产
6. 讨论每个组件的
7. 日志输出优化:
8. (可选) 根据需要, 安装 redis/kafka/rabbitmq 集群(并配置 exporter 监控)
9. 微服务参数优化:
10. 制作 DEV, TEST, UAT, Pre-PROD, PROD 的 DevOps pipeline.
11. 配置 Readiness 和 Liveness 探针.
12. 增加 JMX-exporter 监控和 Tracing 监控.
13. NGINX conf 建议增加: worker_processes 1; 然后按需调节副本数.
14. (可选)配置 PDB, 指定升级或重启过程中:maxUnavailable 或minAvailable(特别适用于: 有状态应用. 典型如: redis, kafka, zookeeper 等)
15. 配置反亲和性podAntiAffinity. 保证同一组微服务/应用/组件尽可能打散在不同 node 上.

5-6 操作步骤:

      nodeSelector:
        zone: internet

11 步示例如下:

          livenessProbe:
            tcpSocket:
              port: 8080
            initialDelaySeconds: 60
          readinessProbe:
            httpGet:
              path: /myapp/services/
              port: 8080
              scheme: HTTP
            initialDelaySeconds: 60

14 步示例如下: (注意关键词: maxUnavailable 和 minAvailable)

kind: PodDisruptionBudget
apiVersion: policy/v1beta1
metadata:
  name: kafka-prod-kafka
  labels:
    app.kubernetes.io/instance: kafka-prod
    app.kubernetes.io/managed-by: strimzi-cluster-operator
    app.kubernetes.io/name: strimzi
    strimzi.io/cluster: kafka-prod
    strimzi.io/kind: Kafka
    strimzi.io/name: kafka-prod-kafka
spec:
  selector:
    matchLabels:
      strimzi.io/cluster: kafka-prod
      strimzi.io/kind: Kafka
      strimzi.io/name: kafka-prod-kafka
  maxUnavailable: 1

kind: PodDisruptionBudget
apiVersion: policy/v1beta1
metadata:
  name: redis-cluster-redis
  namespace: myapp
  labels:
    app.kubernetes.io/component: redis
    app.kubernetes.io/managed-by: redis-operator
    app.kubernetes.io/name: redis
    app.kubernetes.io/part-of: redis-cluster
    redis.kun/v1beta1: myapp_redis
spec:
  minAvailable: 2
  selector:
    matchLabels:
      app.kubernetes.io/component: redis
      app.kubernetes.io/managed-by: redis-operator
      app.kubernetes.io/name: redis
      app.kubernetes.io/part-of: redis-cluster
      redis.kun/v1beta1: myapp_redis

15 步骤示例如下: (注意关键词: podAntiAffinity)

kind: StatefulSet
apiVersion: apps/v1
metadata:
  name: redis-cluster-redis
  labels:
    app.kubernetes.io/component: redis
    app.kubernetes.io/managed-by: redis-operator
    app.kubernetes.io/name: redis
    app.kubernetes.io/part-of: redis-cluster
    redis.kun/v1beta1: myapp_redis
spec:
  replicas: 3
  selector:
    matchLabels:
      app.kubernetes.io/component: redis
      app.kubernetes.io/managed-by: redis-operator
      app.kubernetes.io/name: redis
      app.kubernetes.io/part-of: redis-cluster
      redis.kun/v1beta1: myapp_redis
  template:
    metadata:
      creationTimestamp: null
      labels:
        app.kubernetes.io/component: redis
        app.kubernetes.io/managed-by: redis-operator
        app.kubernetes.io/name: redis
        app.kubernetes.io/part-of: redis-cluster
        redis.kun/v1beta1: myapp_redis
    spec:
      containers:
        <...>
      affinity:
        podAntiAffinity:
          preferredDuringSchedulingIgnoredDuringExecution:
            - weight: 100
              podAffinityTerm:
                labelSelector:
                  matchLabels:
                    app.kubernetes.io/component: redis
                    app.kubernetes.io/managed-by: redis-operator
                    app.kubernetes.io/name: redis
                    app.kubernetes.io/part-of: redis-cluster
                    redis.kun/v1beta1: myapp_redis
                topologyKey: kubernetes.io/hostname
...

完

🎉🎉🎉

本文由博客一文多发平台 OpenWrite 发布！