Appleのコンピュテーショナルフォトグラフィーで見つかった、現実を歪めるエラー

 (appleinsider.com)
1 ポイント 投稿者 GN⁺ 2023-12-02 | 1件のコメント | WhatsAppで共有

コンピュテーショナルフォトグラフィーの失敗で現実を曲げる花嫁予定者

  • 英国の女性が、鏡の前で撮影された写真で映り込みの姿が一致しない現象を発見。
  • iPhoneのコンピュテーショナルフォトグラフィーのエラーによって生じた現象で、鏡に映った複数の姿がそれぞれ異なるポーズを取っている。
  • 写真は、ウェディングドレスを着たテッサ・コーツが鏡の前に立っている様子を写しており、それぞれの鏡に映った彼女の姿が異なる姿勢を取っている。

Appleのコンピュテーショナルフォトグラフィー・パイプラインのエラー

  • iPhoneのカメラが鏡を撮っていることを認識できず、鏡に映った複数の姿を別々の人物として処理している。
  • コーツが動いている間に複数の異なる画像がキャプチャされ、Appleのアルゴリズムがそれらを合成して、彩度、コントラスト、ディテール、ブレのなさが最良の画像を選択する。
  • 最終的な合成画像はその瞬間の最も現実的な解釈になるはずだが、鏡があるため、アルゴリズムは各鏡に見える異なる瞬間を最適だと判断し、互いに異なる姿のテッサを生成してしまう。

コンピュテーショナルフォトグラフィーの限界とソーシャルメディアでの活用

  • 最近のiPhoneや多くのスマートフォンでは、鏡を扱うコンピュテーショナルフォトグラフィーの限界により、このような結果を再現できる。
  • 若い世代はこの現象を理解し、ソーシャルメディア向けの面白い画像を作るために活用している。

GN⁺の意見

  • この記事で最も重要なのは、コンピュテーショナルフォトグラフィーの限界と、それによって起こりうる現実の歪みの実例であること。
  • 人々にとって興味深い理由は、技術の進歩がどのように予想外の結果を招くかを示しており、日常的な技術利用で起こりうる興味深いエラーへの認識を高められるためである。

関連記事

1件のコメント

 
GN⁺ 2023-12-02
Hacker Newsの意見

  • 元記事のほうがより良い情報源かもしれない

    • 元記事についての短い要約文が参照されていたが、元記事のほうがより良い情報を提供している可能性がある。

  • コンピュテーショナルフォトグラフィに対する純粋主義者の反感と個人的な満足

    • 純粋主義者はコンピュテーショナルフォトグラフィを嫌うかもしれないが、あるユーザーはiPhoneで夜間・低照度・動きのある画像をうまく撮影できることを気に入っている。
    • 物理的に小さなセンサーでは不可能だと思っていた夜景写真を撮ることができた。
    • 写真が実際の状況を100%ピクセル単位で完全に再現していないかもしれないが、そのユーザーはそれを重要視していない。
    • HDR露出スタッキング、フォーカススタッキング、人や車のいない画像を作るために複数の写真を合成する技術などを使っており、目的はピクセル単位で完全な再現ではなく、被写体を捉えた画像を得ることにある。

  • Google Pixel 7で撮った写真とコンピュテーショナルフォトグラフィに関する経験

    • Google Pixel 7でシカの写真を撮ったところ、細部を見るとすべてが油絵のような奇妙な効果を帯びていた。
    • コンピュテーショナルフォトグラフィはとてもすばらしい一方で、少し不安にもさせられる。

  • スマートフォンのアルゴリズムによる写真の非現実的な変形体験

    • Galaxy 22 Ultraで息子の写真を完璧に撮れたのに、アルゴリズムが息子の肌を壁の質感に変えてしまった。
    • RAWモードに切り替えれば今後の写真は救えるが、「プロ」カメラモードでしか動作せず、不便さがある。
    • 最終的にサードパーティ製のカメラアプリをインストールして使うことにした。

  • 「パノ-フランケンシュタイン」写真に対する家族の趣味

    • 家族は人の顔が素早く表情を変えるところをパノラマ写真で撮って、面白い結果を楽しんでいる。

  • AIによる改変が法的防御手段として活用される可能性

    • AIによる改変の事例は法的防御の一部として使われるようになり、一部の裁判官や陪審員に合理的な疑いの余地を与えるかもしれないと予想されている。

  • Google Pixelの写真撮影方式とHDRスタッキング

    • Google Pixelはカメラアプリを開いた瞬間からフレームの保存を始め、実際に写真を撮るときにそれ以前のフレームを使ってHDRスタッキング効果を出せる。

  • 蝶の脚が消えたコンピュテーショナルフォトグラフィの結果物

    • 蝶の飼育施設で撮った接写写真では、蝶の脚が消されて羽だけが残る結果になった。

  • 現実に対する認識とコンピュテーショナルフォトグラフィの影響

    • 現実とは何かという問いと、コンピュテーショナルフォトグラフィが現実をどのように捉えるのかについての考察。
    • 光学カメラが私たちの現実を忠実に捉えているのか、そしてコンピュテーショナルフォトグラフィが作り出す現実が私たちの認識とどう異なるのかについての議論。

  • iPhoneカメラアプリの撮影機能と最適な写真の選択

    • iPhoneカメラアプリでボタンを長押しすると複数の写真を撮影し、その中から「最高」だと判断した写真を表示する。
    • この機能は、人が目を開けている写真を選ぶことに基づいている。