Infinigen: 手続き的生成で無限のフォトリアリスティックな世界を実現

• Infinigenは、"手続き的3Dシーン生成器"として、コンピュータビジョン研究向けの高品質な3D学習データを生成します。
• Blenderベースで動作し、BSD 3-Clause Licenseにより無料かつオープンソースで提供されます。

主要機能と特徴

手続き的生成（Procedural）

• すべての形状と素材を数学的ルールでランダムに生成します。
• マクロ構造から微細なディテールまでを生成できます。
• 無限のバリエーションとユーザー定義が可能です。

多様なデータ生成（Diverse）

• 自然界の植物、動物、地形、火、雲、雨、雪など、さまざまな物体とシーンの生成が可能です。
• 初期の焦点は自然環境に合わせられていますが、人造物や建築環境へ拡張予定です。

実ジオメトリ（Real Geometry）

• すべての詳細ジオメトリが実際に実装されており、正確な3Dデータを保証します。
• バンプマップ、ノーマルマップなど、仮想的なディテール表現手法は使用しません。
• コンピュータビジョン、特に3Dビジョン研究に最適化されています。

自動アノテーション生成（Automatic Annotations）

• 光学フロー、3Dシーンフロー、深度、サーフェスノーマル、パノプティックセグメンテーション、オクルージョン境界などの高品質なアノテーションを自動生成します。
• レンダリングプロセス全体へのユーザーアクセス権を提供することで、アノテーションのカスタマイズが容易になります。

--

研究論文

1. Infinite Photorealistic Worlds Using Procedural Generation

   • IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR) 2023 発表
   • 3D手続き的生成の無限の可能性を扱った論文です。

2. Infinigen Indoors: Photorealistic Indoor Scenes using Procedural Generation

   • CVPR 2024 発表予定
   • 室内シーン生成の手続き的アプローチに関する研究。

[GN⁺]

Hacker Newsの意見

• 本当に素晴らしいプロジェクトです

  • ML/AI研究者の皆さんに質問があります。これに関連するML/AIの論文、たとえば仮想環境でロボットを訓練することに関する論文があるかどうか知りたいです
  • 現在のML/AI分野でロボットを訓練するために使われているデータセットが何か気になります

• 室内シーンは非常にリアルに見えるのですが、屋外シーンはかなり不足しており、最新技術に比べて遅れているようです

• 著者リストには複数の有名な中国の大学が含まれているのを見ました。これはチップ制裁・輸出規制違反を意味するのではないかと疑問です

• 以前に投稿されていたかどうか知りたいです。すごいと思いますが、何年か前から存在していた気がします。アップデートがあったのか確認したいです

• 過去の投稿リンク: https://news.ycombinator.com/item?id=36373494

• READMEでは明確ではありません。無限のバリエーションを生成できるという意味なのか、無限の世界を生成するという意味なのか気になります

• メタタグの説明を更新する必要があり、共有時にプレースホルダーコンテンツが表示されます

• これが可能であるという事実は宇宙について何かを示しているようなものです。環境には、我々が考えるほど情報が多くないということです

  • これは特に、動物の小さな脳が世界をモデル化して機能するのが異様に効率的である理由を説明できるかもしれません

• マトリックスのような導入部分がまったく上品ではありません