Hacker Newsがダウン

[GN⁺]

Hacker Newsの反応

• 数日前にアンチクローラー保護設定を緩めたところ、サーバーに過負荷がかかったようです
  もともとは正規ユーザーがブロックされるのを防ぐための措置でしたが、緩めすぎたのかもしれません
  午前5時24分にPagerDutyの通知を受けてHNを確認したときは問題なさそうに見えたので解決済みにしましたが、実際にはその時はただ寝ていました
  午後にはもう少し詳しいことが分かると思います

  • 面白い、Dangが寝ぼけながらでもHNを運営していることがこれで公式に確認されたわけですね
  • あまり気にしないでほしいです。結局は記事を読んでコメントするだけのサイトです
    睡眠はしっかり取るべきです。数時間落ちていても大丈夫です。いつもありがとう
  • 最初にHNが開かなかったとき、世界的な障害でも起きたのかと思いました
    downforeveryoneorjustme.com/hacker-newsで確認したら短時間で52件の報告がありました
    いったい誰がそんなに大量にクロールしていたのか気になります。DDoSなのか、それともAI企業のデータ収集なのか
    HNにはAPIもデータセットもあるのに、あえてクロールする理由が興味深いです
  • 米国時間の睡眠時間帯は通知を一時停止する運用ポリシーがあってもよさそうです
    HNは重要ですが、深夜に起きて対応するほどのリスクではありません
    睡眠不足のコストがかなり大きいことは経験から学びました
  • 謝る必要はありません。みんな先延ばしにしていたことを少し止める機会になりました

• HNが落ちたら無限ループに陥りました
  「HNが落ちてる→HNで障害の知らせを確認しよう→HNが落ちてる」の繰り返しでした

  • 私もそうでした。「そのうち復旧するだろう」と思って更新し続けていたら何時間も経っていました
    もうループが壊れてくれてよかったです
  • 無意識にブラウザを開き直してHNのトップページを2、3回確認する癖があります
  • 面白い、私は落ちていなくてもHNループに陥っています
  • 朝起きて「もしかして地獄で目覚めたのか」と思いました
  • 何か大事故でも起きたのかと思ってLinux Discordサーバーで「HNが落ちているんですが大きな障害ですか？」と聞きました

• 今日新たに分かったのは、自分の手が自動でHacker Newsを開く反射を持っていることです

  • ここでコメントを読むのが一番勉強になります。だからこの中毒が生まれたのでしょう
  • 自分だけじゃなくて安心しました。ブラウザのアドレスバーに「n」と打つだけで自動補完でHNが出ます
  • 私はLeechBlockを使って、新しいHNウィンドウを開くときに5秒の遅延タイマーを設定しています
    フォーカスを失うとタイマーが失敗するので、本当にペースを抑える助けになります
    LeechBlockリンク
  • その段階を超えてアプリを4つ作り、今ではARRが5億ドルに近づいています
  • no procrast modeを有効にして1時間に10分だけHNを見るように設定したら、かなり効果がありました

• 朝のルーティンにHNがないと何だか物足りませんでした

  • これはAWSやCloudflareの障害よりも一日の中で大きな影響がありました

• HNStatusのTwitterアカウントがまだ有効なのか気になりました
  ログインしないと時系列でないフィードしか表示されないので、ほとんど役に立ちません
  もっとよい状態確認方法があるのかと尋ねていました

  • 私たちが障害を認識していて、それが数分以上続くときだけそこに投稿します
    今回は気づいていませんでした。関連する内容はこのコメントにあります
  • xcancel.com/HNStatusは固定ツイート以降、時系列順の表示だけを維持しています
    x.comのリンクをxcancel.comに置き換えるとずっと見やすくなります
  • モバイルアプリで「Following」タブの並び順を「most recent」に変えると、再び時系列フィードに戻ります
    Webでもその設定は維持されます
  • hn.hund.ioもステータスページですが、今回は検知できませんでした
    文字色がグレーなのでテキストをあまり読まなくなる問題もあります

• 「年末までに**エラーバジェット(error budget)**を使い切らないといけない」という冗談が面白かったです

  • 年末の「使わないと消える」予算のせいで、昔却下された依頼を慌てて処理していたことを思い出しました
    結局、半年間ほとんど使われなかったわけです

• 3時間ほど落ちていたようです
  incidentリンク,
  downforeveryoneorjustme.com/hacker-newsを参照
  不思議なことにstatuspalには何の記録もありませんでした
  statuspalリンク

  • 興味深いことに、ログインしていない状態ではサイトがずっと開いていました

• 落ちていたとき、「これで今日は生産的に過ごせそうだ」と思いました

  • 次はプライベートブラウジングモードで開けばいいです
    HNの障害のほとんどはログイン済みのリクエストにしか影響しません
    Cookieを消してもいいですが、復旧後に再ログインが必要です
  • ははは

• Webは開きませんでしたが、私のHN CLIツールは読み取り専用で接続できました
  hnterminalリンク

• 複数の障害検知サービスが今回はちゃんと機能しませんでした
  信頼性ダッシュボードが必要だと感じました

  • キャッシュのせいでだまされたようです。ログアウト状態のページには強いキャッシュがかかっていて、正常応答のように見えました
  • じゃあ今度は障害検知器の障害検知器も必要ですね
  • 結局、downdetectorsdowndetector.comみたいなものが必要ということです