B システム設計/インフラ — shipping-rate-estimator 外部配送会社API依存の信頼性設計（GKE Autopilot Sidecar Container(Envoy) タイムアウト×サーキットブレーカー×Outlier Detection × アプリ側フォールバック(全国一律送料) × Cloud Monitoring SLO(request-based SLI) × マルチウィンドウ・マルチバーンレートアラート × エラーバジェットに基づくCI/CDリリース凍結ゲート）（MOps 販促システムチーム チェックアウト全停止インシデント Bad→Good）

📋 コピー# shipping-rate-estimator/app/checkout.py
"""チェックアウト時の配送料金見積もりを行うモジュール。

外部配送会社APIの障害時は、ビジネス側が承認済みの
全国一律送料フォールバックへ切り替え、チェックアウトを継続させる。
"""
import logging
import httpx
from tenacity import (
    retry, stop_after_attempt, wait_exponential_jitter, retry_if_exception_type,
)

logger = logging.getLogger(__name__)

DEFAULT_FLAT_RATE_JPY = 660       # 修正③: 障害時フォールバック送料（全国一律・経営承認済み）
CARRIER_API_TIMEOUT_SEC = 2.0     # 修正①: 外部APIのp99 SLAに合わせたアプリ側タイムアウト
MAX_RETRY_ATTEMPTS = 2            # 修正⑦: 過剰リトライによるthundering herdを防ぐ上限


@retry(
    stop=stop_after_attempt(MAX_RETRY_ATTEMPTS),
    wait=wait_exponential_jitter(initial=0.2, max=1.0),  # 修正⑦: 指数バックオフ+ジッター
    retry=retry_if_exception_type(httpx.HTTPError),
    reraise=True,
)
def _call_carrier_api(cart: Cart) -> float:
    """Envoy sidecar（localhost:15001）経由で外部配送会社APIを呼ぶ。

    Args:
        cart: 見積もり対象のカート。

    Returns:
        配送料金（円）。

    Raises:
        httpx.HTTPError: サーキットオープン中・タイムアウト・5xx等の失敗時。
    """
    with httpx.Client(base_url="http://localhost:15001", timeout=CARRIER_API_TIMEOUT_SEC) as client:
        resp = client.post("/v1/estimate", json={"items": cart.items, "zip": cart.zip_code})
        resp.raise_for_status()
        return resp.json()["amount"]


def get_shipping_rate(cart: Cart) -> ShippingRate:
    """カートの配送料金を取得する。外部API障害時はフォールバックする。

    Args:
        cart: 見積もり対象のカート。

    Returns:
        ShippingRate: 送料と、フォールバックを使用したかどうかのフラグを含む。
    """
    try:
        amount = _call_carrier_api(cart)
        return ShippingRate(amount=amount, fallback_used=False)
    except httpx.HTTPError as exc:
        # 修正③: チェックアウトを失敗させず、承認済みフォールバックへ切り替える
        logger.warning(
            "shipping_rate_fallback_used",
            extra={"reason": str(exc), "cart_id": cart.id, "fallback_amount": DEFAULT_FLAT_RATE_JPY},
        )
        SHIPPING_RATE_FALLBACK_COUNTER.inc()  # DataDog/Cloud Monitoringへ送出するカスタムメトリクス
        return ShippingRate(amount=DEFAULT_FLAT_RATE_JPY, fallback_used=True)

📋 コピーresource "google_monitoring_service" "checkout" {
  service_id   = "checkout"
  display_name = "Checkout (shipping-rate-estimator含む)"
}

# 修正④: request-based SLI（フォールバック成功も「good」に含める＝
#         ビジネス判断上、チェックアウトが完走すればSLOは満たされているとみなす）
resource "google_monitoring_slo" "checkout_availability" {
  service             = google_monitoring_service.checkout.service_id
  slo_id              = "checkout-availability"
  display_name        = "Checkout Availability (fallback許容)"
  goal                = 0.999          # 月間99.9%
  rolling_period_days = 30
  request_based_sli {
    good_total_ratio {
      good_service_filter  = "resource.type=\"cloud_run_revision\" AND (metric.label.response_code_class=\"2xx\" OR jsonPayload.fallback_used=\"true\")"
      total_service_filter = "resource.type=\"cloud_run_revision\""
    }
  }
}

# 修正⑤: マルチウィンドウ・マルチバーンレートアラート（Google SREワークブック準拠）
resource "google_monitoring_alert_policy" "checkout_slo_fast_burn" {
  display_name = "checkout SLO fast burn (1h窓, 14.4x)"
  conditions {
    display_name = "burn_rate > 14.4 over 1h AND 5m"
    condition_threshold {
      filter          = "select_slo_burn_rate(\"${google_monitoring_slo.checkout_availability.id}\", \"3600s\")"
      comparison      = "COMPARISON_GT"
      threshold_value = 14.4
      duration        = "0s"
    }
  }
  combiner = "OR"
  notification_channels = [google_monitoring_notification_channel.pagerduty.id]
}

resource "google_monitoring_alert_policy" "checkout_slo_slow_burn" {
  display_name = "checkout SLO slow burn (6h窓, 6x)"
  conditions {
    display_name = "burn_rate > 6 over 6h"
    condition_threshold {
      filter          = "select_slo_burn_rate(\"${google_monitoring_slo.checkout_availability.id}\", \"21600s\")"
      comparison      = "COMPARISON_GT"
      threshold_value = 6
      duration        = "0s"
    }
  }
  combiner = "OR"
  notification_channels = [google_monitoring_notification_channel.slack.id]
}

📋 コピー# .github/workflows/deploy-shipping-rate-estimator.yaml（抜粋）
jobs:
  error-budget-gate:
    runs-on: ubuntu-latest
    outputs:
      budget_remaining_pct: ${{ steps.check.outputs.budget_remaining_pct }}
    steps:
      - id: check
        run: |
          # Cloud Monitoring SLO APIからエラーバジェット残量を取得
          REMAINING=$(gcloud monitoring slo describe checkout-availability \
            --service=checkout --format="value(errorBudget.remainingPercent)")
          echo "budget_remaining_pct=$REMAINING" >> "$GITHUB_OUTPUT"

  deploy:
    needs: error-budget-gate
    # 修正⑥: エラーバジェット10%超、またはincident-fixタグ付きのみ通常デプロイを許可
    if: needs.error-budget-gate.outputs.budget_remaining_pct > 10 || contains(github.event.head_commit.message, 'incident-fix')
    runs-on: ubuntu-latest
    steps:
      - run: echo "デプロイ実行"