关于consul:不背锅运维配置管理和服务发现之Confd和Consul

33次阅读

共计 5033 个字符，预计需要花费 13 分钟才能阅读完成。

Confd 和 Consul 是什么鬼？

Confd 和 Consul 都是用于配置管理和服务发现的工具。

  • https://www.consul.io/
  • https://www.tail-f.com/confd-basic/
Confd

Confd 是一个轻量级的工具，用于治理分布式系统中的配置文件。它通过将配置文件和模板拆散来解决配置管理的挑战。Confd 监督由 Etcd、Zookeeper、Consul 等后端存储的配置更改，而后依据定义的模板生成配置文件，并将其散发到零碎中的所有节点。Confd 还反对从命令行或环境变量中读取配置参数，并将其注入到模板中。

在实践中，Confd 能够用于治理诸如 Nginx、Apache 等 Web 服务器的配置文件，以及运行在 Docker 或 Kubernetes 容器中的应用程序的配置文件。Confd 还能够通过与 Vault 等密钥管理工具的集成来提供平安的配置存储和传输。

Consul

Consul 是一个功能强大的服务发现和配置管理平台。它提供了分布式 KV 存储、健康检查、DNS 和 HTTP API 等性能，使得服务的发现和治理变得非常简单。Consul 还反对多数据中心和平安通信，以保证系统的高可用性和安全性。

在实践中，Consul 能够用于治理多种类型的服务，包含 Web 应用程序、数据库、音讯队列等。它还能够与容器编排工具（如 Docker Compose 和 Kubernetes）和配置管理工具（如 Ansible 和 Chef）等集成，提供全面的配置管理和服务发现解决方案。

总的来说，Confd 和 Consul 都是十分有用的工具，用于治理分布式系统的配置和服务发现。抉择哪个工具取决于您的具体需要，例如您须要治理什么类型的服务，以及您心愿在零碎中应用哪些特定的性能。

利用场景

Confd 和 Consul 都是用于分布式系统配置管理和服务发现的工具，实用于许多不同的利用场景。以下是一些可能的利用场景：

Confd
  • 配置 Web 服务器：Confd 能够用于治理 Nginx、Apache 等 Web 服务器的配置文件，并主动将配置文件散发到所有节点。
  • 配置容器：Confd 能够在 Docker 或 Kubernetes 容器中运行，并将容器所需的配置文件动静生成并散发到容器中的应用程序。
  • 集成密钥管理工具：Confd 能够与 Vault 等密钥管理工具集成，提供平安的配置存储和传输。
  • 治理分布式系统配置：Confd 能够治理分布式系统中的各种配置文件，例如数据库配置、应用程序配置等。
Consul
  • 服务发现：Consul 提供了弱小的服务发现性能，能够帮忙应用程序发现和连贯到其余服务。
  • 治理多数据中心环境：Consul 能够治理多个数据中心之间的服务发现和配置管理，以保证系统的高可用性。
  • DNS 和 HTTP API：Consul 提供了 DNS 和 HTTP API 接口，以便应用程序能够轻松地发现和连贯到其余服务。
  • 健康检查：Consul 能够查看服务的衰弱状态，并在服务呈现故障时主动将流量路由到衰弱的节点上。

简而言之，Confd 和 Consul 能够用于治理各种类型的配置文件和服务发现需要，实用于各种分布式系统和利用场景。抉择哪种工具取决于您的具体需要和偏好。

Confd+Consul

联合应用 Confd 和 Consul 能够提供更全面和灵便的分布式系统配置管理和服务发现解决方案，实用于许多不同的利用场景。以下是一些可能的联合应用场景：

  • 在 Docker 容器中运行 Confd，应用 Consul 来发现和治理容器中运行的服务。这种办法能够提供动静配置生成和散发以及服务发现和健康检查性能。
  • 应用 Confd 从后端存储（如 Etcd、Zookeeper、Consul 等）中获取配置信息，并应用 Consul 来发现服务和治理它们的衰弱状态。这种办法能够提供动静配置生成和散发以及服务发现和健康检查性能。
  • 应用 Consul 的 KV 存储来存储应用程序的配置信息，而后应用 Confd 从 KV 存储中获取配置并将其注入到应用程序的模板中。这种办法能够提供平安的配置存储和传输，同时提供灵便的配置选项。
  • 应用 Confd 和 Consul 来治理多个数据中心之间的服务发现和配置管理，以保证系统的高可用性。这种办法能够提供跨数据中心的服务发现和配置管理性能。
  • 将 Confd 和 Consul 与 Vault 等密钥管理工具联合应用，提供平安的配置存储和传输。这种办法能够确保应用程序的配置信息失去充沛爱护。

联合应用 Confd 和 Consul 能够提供更全面和灵便的配置管理和服务发现解决方案，实用于各种分布式系统和利用场景。抉择哪种联合应用办法取决于您的具体需要和偏好。

实战

上面分享两个 Confd 和 Consul 的简略实战，心愿能起到抛砖引玉的成果。

案例 1

场景：应用 Confd、Consul 和 nginx 来管理应用程序的动静配置和负载平衡：

正式开撸
  1. 装置 etcd 或 Consul、Confd 和 nginx。
  2. 创立一个 Confd 配置文件，指定 etcd 或 Consul 的地址和端口等信息，并指定要监督的配置文件的门路和格局。例如，以下是一个 Confd 配置文件的示例：
[template]
src = "/path/to/nginx.conf.tmpl"
dest = "/etc/nginx/nginx.conf"
keys = [
  "/nginx/upstream/backend1/server1",
  "/nginx/upstream/backend1/server2",
]

此配置指定将从 etcd 或 Consul 中监督 /nginx/upstream/backend1/server1 和 /nginx/upstream/backend1/server2 键，并应用 nginx.conf.tmpl 模板生成配置文件 nginx.conf。

  1. 创立一个 nginx.conf.tmpl 模板文件，其中蕴含应用程序的负载平衡配置数据。例如：
http {
  upstream backend {server {{key "/nginx/upstream/backend1/server1"}};
    server {{key "/nginx/upstream/backend1/server2"}};
  }

  server {
    listen 80;
    server_name example.com;

    location / {proxy_pass http://backend;}
  }
}

此模板文件应用 Confd 的 key 函数将 /nginx/upstream/backend1/server1 和 /nginx/upstream/backend1/server2 键的值注入到 nginx.conf 中的 upstream 局部。

  1. 启动 Confd，并应用以下命令指定下面创立的 Confd 配置文件：
confd -config-file /path/to/confd.conf

此命令将启动 Confd 并开始监督指定的键。

  1. 启动 nginx，并指定应用生成的配置文件 nginx.conf：
nginx -c /etc/nginx/nginx.conf

此命令将启动 nginx，并应用生成的配置文件。

  1. 在 Consul 中注册后端服务，并增加服务器地址和端口。例如，以下是一个应用 Consul API 注册后端服务并增加服务器地址和端口的示例：
curl -X PUT -d @service.json http://localhost:8500/v1/agent/service/register
curl -X PUT -d 'backend1.example.com:8080' http://localhost:8500/v1/kv/nginx/upstream/backend1/server1
curl -X PUT -d 'backend2.example.com:8080' http://localhost:8500/v1/kv/nginx/upstream/backend1/server2

此命令将注册一个名为 backend1 的服务，并增加服务器地址和端口到 Consul 的键 / 值存储中。

  1. 在浏览器中拜访 nginx 的 IP 地址或域名，例如 example.com，以测试负载平衡性能。

这个案例简略演示了如何应用 Confd、Consul 和 nginx 来实现动静配置和负载平衡性能，能够依据理论需要进行批改和扩大。

案例 2

场景：在一个基于 Docker 的分布式应用程序中，咱们应用 Confd 从 Consul 中获取 Nginx 的配置信息，并将配置文件注入到 Nginx 容器中，以便 Nginx 能够自动更新其配置并反向代理到其余服务。

正式开撸
  1. 装置 Docker、Confd 和 Consul。
  2. 启动 Consul 服务器：
consul agent -server -bootstrap-expect=1 -data-dir=consul-data -ui -bind=<ip-address>
  1. 在 Consul 中注册其余服务，例如一个名为 web-service 的 Web 服务：
consul services register -name web-service -port 8080
  1. 在 Consul 中存储 Nginx 的配置信息，例如一个名为 nginx.conf 的配置文件：
consul kv put nginx.conf 'server {
    listen 80;
    server_name example.com;

    location / {proxy_pass http://web-service:8080;}
}'
  1. 启动 Nginx 容器，并在容器中运行 Confd：
docker run -d --name nginx \
  -p 80:80 \
  -v /etc/nginx/conf.d \
  -e CONSUL_HTTP_ADDR=<ip-address>:8500 \
  nginx

docker run -d --name confd \
  -e CONSUL_HTTP_ADDR=<ip-address>:8500 \
  -v /etc/nginx/conf.d \
  confd -backend=consul -node=<ip-address>:8500 -watch
  1. 在 Nginx 容器中，创立一个 Confd 模板文件 nginx.conf.tmpl，用于将 Consul 中存储的配置信息注入到 Nginx 配置文件中：
server {
    listen 80;
    server_name example.com;

    {{range services "web-service"}}
    location / {proxy_pass http://{{.Address}}:{{.Port}};
    }
    {{end}}
}
  1. 在 Nginx 容器中，创立一个 Confd 配置文件 nginx.toml，指定 Confd 如何将 Consul 中的配置信息注入到 Nginx 配置文件中：
[template]
src = "nginx.conf.tmpl"
dest = "/etc/nginx/conf.d/nginx.conf"
keys = ["nginx.conf",]
check_cmd = "/usr/sbin/nginx -t -c /etc/nginx/nginx.conf"
reload_cmd = "/usr/sbin/nginx -s reload -c /etc/nginx/nginx.conf"
  1. 启动 Confd 容器，并将 Confd 模板和配置文件挂载到 Nginx 容器中：
$ docker run -d --name confd \
  -v /etc/nginx/conf.d \
  -v /etc/confd/conf.d \
  -v /etc/confd/templates \
  --link nginx \
  confd -backend=consul -node=<ip-address>:8500 -watch
  1. 拜访 Nginx 的 Web 服务，查看是否能够胜利反向代理到其余服务。

本文转载于（喜爱的盆友关注咱们）：https://mp.weixin.qq.com/s/daytnZIst7s88HUdag1x_Q

正文完
consul
发表至： consul
2023-03-07
 0
关于consul:Apache-APISIX-集成-Consul-KV服务发现能力再升级
关于consul:不背锅运维配置管理和服务发现之Confd和Consul
关于consul:如何安装部署Consul
关于consul:prometheus结合consulconfd实现动态注册服务和动态更新配置告警规则