HN公開:サンフランシスコのSutro Towerを没入的に体験できるGaussian Splat
(vincentwoo.com)- サンフランシスコの象徴的な構造物である Sutro Tower をWeb上で3D探索でき、スマートフォンではARモードでシーンの中を歩き回るように見られる
- シーン制作には Gaussian Splatting が使われ、ドローン撮影からRealityCaptureでのアラインメント、gsplatでの学習、SOGS圧縮、PlayCanvasレンダリングまでのパイプラインを経ている
- マウス・タッチ・キーボード操作に対応し、Orbit、Pan、Look、Zoom、Fly、速度調整、カメラリセットでタワー周辺を自由に移動できる
- 西側の脚には 内部エレベーター があり、2人がやや窮屈に乗れる程度で、全行程には8分かかる
- 高さ977フィートのSutro TowerはSalesforce Towerより低いが、基礎が海抜834フィートにあるため、サンフランシスコを眺めるうえではより高い位置にいる感覚を与える
Webで見るSutro Towerの3Dシーン
- サンフランシスコの Sutro Tower 3Dモデル をブラウザで自由に探索できる
- スマートフォンでは小さなキューブアイコンから ARモード をオンにできる
- ユーザーが実際に歩き回り、スマートフォンを動かしながらシーンを見回す方式
- タワー自体に関する詳しい情報は 公式デジタルツアー で見られる
Gaussian Splattingの制作パイプラインと操作方法
- シーンは近年発展した Gaussian Splatting をベースに作られている
- ドローンでシーンを撮影
- RealityCapture でアラインメント
- gsplat で学習
- SOGS で圧縮
- PlayCanvas でレンダリング
- 探索操作はデスクトップとタッチ入力の両方に対応
- Orbit: 左マウスボタンまたはタッチドラッグ
- Pan: 中央マウスボタンまたはスワイプ
- Look: 右マウスボタン
- Zoom: マウスホイールまたはピンチ
- Fly: WASDまたは矢印キー
- より速く飛行: Shift
- より遅く飛行: Ctrl
- カメラリセット: R
タワー内部と構造上の特徴
- Sutro Towerの 西側の脚 には内部エレベーターがある
- 2人がやや窮屈に入れる
- エレベーターがタワーの腰部を通過する際、前傾した状態から後傾した状態へ変わり、乗客はわずかな方向感覚の混乱を覚えることがある
- 全行程の所要時間は8分
- タワー構造は Albert C. Martin & Associates of Los Angeles が設計し、Kline Iron and Steels が製作・建設した
- 高さは977フィート
- 基礎は海抜834フィートにある
- 3本の脚は1,500万ポンドのセメントに埋め込まれている
- タワーには350万ポンドの鋼材が使われている
- 地震安全性のため実際の重心は地下にあり、強風時にはタワーがわずかにねじれるよう設計されている
- Salesforce Tower は1070フィートで、Sutro Towerよりわずかに高い
- Sutro Towerは海抜834フィート地点にあるため、都市を見下ろす眺望では優位に立つ
1件のコメント
Hacker News のコメント
特にウィーンの地図を見ると、本当に興味深い場所がたくさんある
[1] https://en.wikipedia.org/wiki/BBC_Domesday_Project
Gaussian Splatting のニュースは https://radiancefields.com/ で、多くの進展が継続的に取り上げられている
3月5日には Niantic と Cesium の発表者が登壇するタウンホールがある: https://metaverse-standards.org/event/gaussian-splats-town-h...
以前のスプラットのタウンホールと関連発表は動画ページにあり、数日前には Adobe の Gaussian Splatting 発表もあった: https://metaverse-standards.org/presentations-videos/
広く撮った写真をたくさん撮るところから始め、複数の拡大倍率で重なり合う格子状の写真を撮影した。Photosynth がまだ残っていたら、成果物をもう一度見てみたい
[0] https://en.wikipedia.org/wiki/Photosynth
VR モードではずっと多くのディテールを見られて驚いたし、切り替える前はイースターエッグを見つけられなかった
始めるときに座っているべきだったが、フレームレートが低く、水平線の向きもずれていたので、ソファへ移動しようとして転びそうになった。完全に固有受容感覚に頼ると決めていなければ危なかったと思う
低解像度すぎる Inside the Scaniverse や、平板で気恥ずかしい Horizon Worlds と比べると、確実に成功作だ。テザリングモードでもう一度試してみたい