GKE中基于RabbitMQ队列大小的自动缩放



我对Kubernetes和RabbitMQ都很陌生,但我正试图根据RabbitMQ队列中就绪消息的数量自动缩放pod。

我一直在遵循这里的GCP文档,我的prometheus rabbitmq容器是基于这里的

根据这些指南,我创建了一个部署

apiVersion: apps/v1
kind: Deployment
metadata:
labels:
run: rabbitmq-prometheus-sd
name: rabbitmq-prometheus-sd
namespace: default
spec:
replicas: 1
selector:
matchLabels:
run: rabbitmq-prometheus-sd
template:
metadata:
labels:
run: rabbitmq-prometheus-sd
spec:
containers:
# rabbitmq-exporter container
- name: prometheus
image: kbudde/rabbitmq-exporter:v0.29.0
env:
- name: RABBIT_URL
value: http://MYRABBITMQHOST.rmq.cloudamqp.com:15672
- name: RABBIT_USER
value: MYRABBITMQUSERNAME
- name: RABBIT_PASSWORD
value: MYRABBITMQPASSWORD
- name: PUBLISH_PORT
value: "9419"
# amqp 3.6.9++
- name: RABBIT_CAPABILITIES
value: "bert,no_sort"
# pre-built 'prometheus-to-sd' sidecar container to export prometheus
# metrics to Stackdriver
- name: prometheus-to-sd
image: gcr.io/google-containers/prometheus-to-sd:v0.5.0
command: ["/monitor"]
args:
- --source=:http://localhost:9419
- --stackdriver-prefix=custom.googleapis.com
- --pod-id=$(POD_ID)
- --namespace-id=$(POD_NAMESPACE)
env:
# save Kubernetes metadata as environment variables for use in metrics
- name: POD_ID
valueFrom:
fieldRef:
apiVersion: v1
fieldPath: metadata.uid
- name: POD_NAMESPACE
valueFrom:
fieldRef:
fieldPath: metadata.namespace

我可以将其部署到GKE中的集群中,但当我在度量资源管理器中检查自定义度量时,我只能找到这3个,而不能找到其他度量:

  • rabbitmq_exporter_build_info
  • rabbitmq_module_up
  • 拉比q_up

显然,如果没有队列度量,我就无法创建HPA来扩展我的应用程序。对于为什么没有提供这些指标或建议替代路线的任何帮助或指导,我们将不胜感激。

问题是rabbitmq导出程序无法与cloudampq上托管的rabbitmq。这种按比例缩放的方法被用来代替

您可以使用keda,特别是RabbitMQ触发器,根据RabbitMQ队列的大小自动缩放Kubernetes部署。

最新更新