HN公開: サンフランシスコのスートロ・タワーの没入型Gaussian Splat体験

• 紹介

  • San Francisco の Sutro Tower 3Dモデルの説明。
  • モバイル端末では ARモードを通じてシーンを探索できる。
  • Sutro Tower は素晴らしい建築物であり、さらに詳しい情報が必要であれば公式デジタルツアーを参照できる。

• 技術的背景

  • このスキャンは、最近の Gaussian Splatting の進歩のおかげで可能になった。
  • ドローンで撮影し、RealityCapture でアラインした後、gsplat で学習し、SOGS で圧縮し、PlayCanvas でレンダリングしている。

• 謝辞

  • Self Organizing Gaussian 圧縮の開発と理解を助けてくれた Wieland Morgenstern に感謝。
  • 新しい圧縮形式のデコード実装を助けてくれた Donovan Hutchence に感謝。
  • 2台目のドローンを操縦してくれた Daylen Yang に感謝。

• 操作方法

  • 注釈、音楽、軌道操作: 左クリック、タッチ + ドラッグ
  • パン: 中クリック、スワイプ
  • 視点移動: 右クリック
  • ズーム: マウスホイール、ピンチ
  • 飛行: WASD、矢印キー
  • 飛行速度調整: Shift（高速）、Ctrl（低速）
  • カメラ初期化: R

[GN⁺]

Hacker Newsのコメント

• このプロジェクトを共有してくれてありがとう。本当に素晴らしいプロジェクトだ
• 2023年5月にステップ6で約30分過ごしたが、想像できる限り素晴らしかった
  • 高所恐怖症が少しでもあるなら、この体験は悪夢になるだろう
• まったく関係ないが、サンフランシスコの航空写真を見ると、この都市がどれほど低密度かに驚かされる
  • 世界で最も住みやすい場所の一つが小さな半島に位置している
  • しかし見渡す限り一戸建て住宅の海だ
  • Sutro Towerとサンフランシスコの「ダウンタウン」の間の距離は、ブルックリン橋とセントラルパークの間の距離より短い
  • その空間が2〜3階建てのタウンハウスで埋められていたらと想像してしまう
• 妻がクリスマスにSutro Towerのシャツをプレゼントしてくれた
  • OTAデジタルテレビが始まった頃のことだ
  • San Joseのほかの人たちがTVアンテナを撤去したり放置したりしていたとき、私はRat Shackで新しいアンテナとマストセクションを買って家に設置した
  • KQEDなどを受信するために周波数帯をスキャンした
  • HDで初めて見たAustin City Limitsは本当に驚異的だった
  • South BayにSutro経由で届くTV局は、1局を除いてすべてだった
• Sutro Towerのアンテナは、10のTV局、3つのFMラジオ局、20の無線・モバイル通信利用者（例: 法執行機関、タクシー、スクールバス、無線インターネットなど）がベイエリア全体に信号を送信する際に頼っている
• 素晴らしい仕事だ。これまで体験した中でも最高クラスのGaussian Splatの一つだった
  • 特に遠くの物体や空に関してそうだった
  • VRモードではさらに多くの細部を認識できた
  • 「イースターエッグ」は切り替えた後になってやっと見つけた
• すごい！ こういうものを自分で作る方法を説明する、もっと踏み込んだブログ記事を読んでみたい
  • 自分のスプラットを、象徴的なランドマークのための共同ライブラリに寄稿できるかもしれない
  • 人気のある場所についてのインタラクティブなスプラットがWikipediaに追加されるのを想像できる
• 90年代の子どもとして、これは当時の未来主義者たちが思い描いた「サイバースペースの博物館」の、珍しい本物の実例の一つに見える
  • 夢を生かし続けてくれてありがとう
• すごい！ 2009年ごろ、Sutro Towerの展望地点から街に向けてデジタルカメラで数十枚の高解像度写真を撮り、Microsoft Photosynthを使って街の見事な高解像度ポイントクラウドを作った
  • 最初はたくさんのズームアウト写真から始め、その後さまざまなズームレベルで重なり合うグリッド状に写真を撮った
  • Photosynthがまだ存在していたら、その結果をもう一度見てみたい