Istio断路器将流量发送到不健康的服务

36次阅读

问题描述

在使用Istio的断路器功能时遇到了问题。他配置了Istio的虚拟服务、目标规则和nginx容器。他的虚拟服务中有两个不同的nginx容器，他配置了50-50的流量分发。为了测试断路器，他将服务B的副本数缩减为0，期望流量始终路由到服务A。但是实际情况并非如此，当流量路由到服务B时，他遇到了”no healthy upstream”的错误。

解决方案

请注意以下操作注意版本差异及修改前做好备份。

方案1

根据您提供的配置文件，我注意到您在VirtualService.yaml中没有启用重试和超时设置。这可能导致Istio无法正确处理不健康的服务。您可以尝试在VirtualService.yaml中添加以下配置来启用重试和超时设置：

apiVersion: networking.istio.io/v1alpha3
kind: VirtualService
metadata:
  name: nginx-virtual-service
spec:
  hosts:
  - "*"
  gateways:
    - nginx-gateway
  http:
    - route:
      - destination:
          host: nginx-service
          subset: v1
          port:
             number: 80
        weight: 50
      - destination:
          host: nginx-service
          subset: v2
          port:
             number: 80
        weight: 50
      retries:
        attempts: 3
        perTryTimeout: 1s
        retryOn: 5xx
      timeout: 3s

在上面的配置中，我添加了retries和timeout字段来启用重试和超时设置。retries字段定义了重试的次数和超时时间，timeout字段定义了请求的超时时间。您可以根据需要调整这些值。

方案2

如果您希望Istio在服务B不可用时将所有流量路由到服务A，您可以使用Istio的故障注入功能。故障注入功能允许您模拟服务不可用的情况，以测试断路器的行为。您可以在DestinationRule.yaml中添加以下配置来启用故障注入：

apiVersion: networking.istio.io/v1alpha3
kind: DestinationRule
metadata:
  name: nginx-load-balancer
spec:
  host: nginx-service
  trafficPolicy:
    connectionPool:
      http:
        http1MaxPendingRequests: 1
        maxRequestsPerConnection: 1
      tcp:
        maxConnections: 1
    outlierDetection:
        baseEjectionTime: 60s
        consecutive5xxErrors: 1
        interval: 2s
        maxEjectionPercent: 100
  subsets:
  - name: v1
    labels:
      version: "1"
  - name: v2
    labels:
      version: "2"

在上面的配置中，我添加了outlierDetection字段来启用故障注入。outlierDetection字段定义了故障注入的参数，包括基本驱逐时间、连续5xx错误的阈值、检测间隔和最大驱逐百分比。您可以根据需要调整这些值。
请注意，故障注入功能只在Istio的Sidecar代理中生效，因此您需要确保您的服务已经部署在Istio的Sidecar代理中。

方案3

如果以上解决方案仍然无法解决您的问题，您可以尝试使用Istio的故障注入规则来手动控制流量的路由。您可以在VirtualService.yaml中添加以下配置来实现手动控制：

apiVersion: networking.istio.io/v1alpha3
kind: VirtualService
metadata:
  name: nginx-virtual-service
spec:
  hosts:
  - "*"
  gateways:
    - nginx-gateway
  http:
    - route:
      - destination:
          host: nginx-service
          subset: v1
          port:
             number: 80
        weight: 100
      retries:
        attempts: 3
        perTryTimeout: 1s
        retryOn: 5xx
      timeout: 3s

在上面的配置中，我将所有流量路由到服务A，并启用了重试和超时设置。您可以根据需要调整权重和其他配置。
请注意，手动控制流量的路由可能会增加复杂性，并且需要确保服务A和服务B之间的依赖关系正确设置。
以上是几种可能的解决方案，您可以根据您的需求选择适合您的解决方案。希望对您有帮助！

正文完