Cloudflareサービスで広範な障害が発生

 (cloudflarestatus.com)
1 ポイント 投稿者 GN⁺ 2025-06-13 | 1件のコメント | WhatsAppで共有
  • 2025年6月12日、CloudflareでAccess認証の失敗とZero Trust WARP接続の問題が始まり、複数の中核サービスへ障害が拡大し、21:31 UTCに解決した
  • 主要依存先であるサードパーティサービスの障害によりWorkers KVがオフラインとなり、これを基盤に情報を保存・配信していた製品群が連鎖的に影響を受けた
  • 影響範囲はAccess、WARP、Browser Isolation、Browser Rendering、Workers KV、Workers AI、Stream、Turnstile、AI Gateway、AutoRAG、Dashboardの一部など広範囲に及んだ
  • 20:32 UTC時点では全世界でサービス復旧が急速に進んでおり、WARPとTurnstileは稼働状態だったが一部に残留影響があった
  • 20:57 UTCにはすべてのCloudflareサービスが完全稼働状態に戻り、Cloudflareはプラットフォーム指標を監視しながら安定性確認の段階へ移行した

障害の進行と復旧の流れ

  • 18:19 UTCにCloudflareエンジニアリングがAccess認証の失敗問題の調査を開始
    • Cloudflare Zero Trust WARP接続もあわせて影響を受けた
  • その後、複数のサービスで断続的な失敗が発生し、Cloudflareはサービスごとの影響範囲を評価しながら一覧を更新した
  • 19:12 UTCには一部サービスの復旧が始まったが、再試行処理とキャッシュの再充填プロセスにより、影響を受けたサービス全体で断続的なエラーが続く可能性があった
  • 20:32 UTCには世界的にサービス復旧が急速に進行
    • WARPとTurnstileは稼働状態だったが、小規模な残留影響が残っていた
    • 中核のWorkers KVサービスが復旧し、依存する製品群も再びオンラインに戻った
  • 20:57 UTCにはすべてのCloudflareサービスが完全稼働状態となり、継続的な安定性確認のための監視へ移行した
  • 21:31 UTCにこのインシデントは解決済みとして終了した

影響を受けたサービスと原因

  • Cloudflareの重要なWorkers KVサービスが、中核依存先であるサードパーティサービスの障害によりオフラインになった
  • KVサービスを使って情報を保存・配信している一部のCloudflare製品が利用不能となった
    • Access
    • WARP
    • Browser Isolation
    • Browser Rendering
    • Durable ObjectsのうちSQLiteベースのDurable Objects
    • Workers KV
    • Realtime
    • Workers AI
    • Stream
    • Cloudflare Dashboardの一部
    • Turnstile
    • AI Gateway
    • AutoRAG
  • 影響サービス一覧には、Cloudflare Sites and ServicesのAccess、Dashboard、Durable Objects、Realtime SFU、Realtime TURN Service、RealtimeKit、Stream、Waiting Room、Cloudflare One Client、Workers AI、Workers KVが含まれていた

関連記事

1件のコメント

 
GN⁺ 2025-06-13
Hacker News のコメント
  • Cloudflare の中核サービスである Workers KV が、主要な依存先であるサードパーティサービスの障害によって落ちたのだとすれば、一部のサービスは GCP に依存していることになる
  • https://downdetector.com/ では、Google、Cloudflare、AWS など複数の大手企業の障害が見えている
    巷の噂では、このすべての背後に大きな BGP ルーティング問題があるという話がある
    • 筋は通る。以前似たようなことを見たときも、BGP のせいでトラフィックがイランや中国方面にルーティングされていたと記憶している
    • Internet Health Report は 表示するデータなしと出ている
      [1] https://www.ihr.live/
    • Anthropic も落ちているか、性能低下状態。散歩にでも行く時間だ
  • GCP も落ちた https://news.ycombinator.com/item?id=44260810
    • 奇妙な偶然だ。Cloudflare が GCP を使っているのか気になる
  • これは問題になりそう。これほど多くのサービスにまたがる 広範な障害はしばらく見ていない
    • 今はみんな卵を数少ないかごにしか入れないので、こういうことがかなり定期的に起きているように思える
  • 誰かが誤った BGP 設定をデプロイしたのか？
    • これほど大規模で広範囲な障害なら、それが主犯であるべきというくらいだ
  • そのうち、インターネットを救ったという巨大なブログ記事が上がりそう ;)
    今は落ちているが参考リンク: https://blog.cloudflare.com/the-ddos-that-almost-broke-the-i...
  • Workers だけでなく、「Verify you are human」ダイアログ機能にも影響があるようだ
    • その通り、KV も壊れている。KV に依存するすべての Worker が例外を投げている
      ダッシュボードには入れたが非常に遅い。エラー率は UTC 18:00 ごろから大きく上がり始めた
      追記: CF のステータスページも、複数サービスにまたがる広範な障害だと認めている: https://www.cloudflarestatus.com/incidents/25r9t0vz99rp
    • 実際その通り。もう一つの疑問は、なぜこういうダイアログを最初から Akamai ではなく Cloudflareでばかり見るのかということ
  • タイトルが「Broad Cloudflare service outages」に変わった
  • 東京で UTC 18:00 に予定メンテナンスが進行中で、問題が UTC 18:19 に始まったのは偶然だろうか？
    • 関係ない。Cloudflare には、落ちた GCP に依存しているサービスがいくつかある
      それでも、東京のメンテナンス作業をしていた人たちは自分たちのせいで起きたのではないかと顔面蒼白になっただろう
    • 事後分析で分かるだろう。こうした障害の唯一の利点は、良い記事を通じて学び、楽しめることだ
    • そのページには常に 予定メンテナンスがあるので、私の経験上、特にシグナルではない