HDRとは何か?
(lux.camera)- HDR(High Dynamic Range) とは、写真とディスプレイの分野でそれぞれ異なる概念を指す用語
- カメラでは複数の露出値を合成してダイナミックレンジを拡張する「HDRモード」があり、ディスプレイではより広い明るさの範囲を表現する「HDR表示」がある
- 最近のスマートフォンカメラは自動で複数の写真を合成し、AI中心のトーンマッピングによって自然な画像を作ろうとしている
- しかし、このようなAIアルゴリズムはしばしばユーザーの意図と異なる形で画像を変更したり、ディテールを失わせたりする問題がある
- Halide などのカメラアプリは、「AIなしの撮影」、手動トーンマッピング、そしてユーザーがSDR/HDRを直接選べるオプションなど、より広い表現の自由を提供する
HDRとは何か?
HDR(High Dynamic Range) は、写真および映像の分野で関連してはいるが異なる2つの概念として混同されている
- カメラでは、2010年にiPhoneへ導入された「HDRモード」
- ディスプレイでは、より鮮やかで細密な画像を見せる新しい表示技術
この記事では、HDRという用語の実際の意味、それに伴う問題点、そしてそれを解決する3つの方法を多角的に説明している
ダイナミックレンジとは?
- ダイナミックレンジとは、シーンの最も暗い部分と最も明るい部分の差を意味する
- 昔のカメラで夕焼けを撮影すると、空と影の明るさの差のため、写真は常に明るすぎるか暗すぎるかになっていた
- 人間の視覚はシーン全体の広い明暗差を認識できるが、カメラ、とくに画面はこれほどのコントラストをうまく捉えられない
- ほとんどの写真は極端ではないため、「SDR(標準ダイナミックレンジ)」のシーンと呼ばれる
- カメラと画面のどちらもシーンのダイナミックレンジに足りない場合、明るい部分または暗い部分の情報が失われる
解決策1: 「HDRモード」
HDR撮影技法と歴史
- 1990年代、研究者たちは複数の露出で撮影した画像を合成するHDRアルゴリズムを開発した
- このとき登場したトーンマッピング(Tone Mapping)は、明暗差をSDR画面に適した形に「圧縮」して見せる変換方法である
- 複雑なソフトウェアを必要とするトーンマッピングはプロ向けとして登場したが、操作が難しく、過剰な仕上がりになりがちだった
- 最近のスマートフォンは自動で複数露出の画像を撮影した後、複雑なディープラーニングベースのアルゴリズムがトーンマッピングを自動で行う
- Apple や Google などはこの過程を「HDR」と呼ぶが、実際の最終画像はSDRレベルである
HDRアルゴリズムの問題とユーザー体験
- 最近のカメラの Smart HDR、Deep Fusion などのアルゴリズムは、ときに意図しない境界やディテールの損失、「塗りつぶされたような」現象を生む
- 動きのあるシーンを何度も撮影して合成するため、ピクセル位置合わせの過程で明確な劣化が発生する
- 多くのユーザーがAIなしの撮影オプションを求めるようになり、Halide アプリもこの機能をすばやく導入した
- Process Zero というAIを完全に排した撮影モードも人気だが、HDR処理がないため一部の領域が失われることもある
アナログ写真から学ぶ
- フィルム写真の時代、「ネガフィルム」はもともと広いダイナミックレンジを持っていた
- 焼き付け(プリント)の過程では、「覆い焼きと焼き込み」のような手作業でハイライトとシャドウを補正した
- Ansel Adams などの巨匠写真家は、こうした手作業のトーンマッピングで劇的なイメージを生み出した
- 現在 Halide はこの伝統を受け継ぎ、単一撮影ベースの手動トーンマッピング機能を提供している
- ユーザーは写真の細部を調整する際、一度にダイナミックレンジを調整できる専用ダイヤルを使える
解決策2: 真のHDRディスプレイ
HDRディスプレイ導入の現状
- 最近のスマートフォン、TV、モニターなどは実際にHDR出力をサポートし始めている
- Apple TV のHDRスクリーンセーバーなどは、アナログTVからHDTVへの移行に匹敵するほど印象的だ
- しかし、インフラ置き換えコストやコンテンツ制作者による過剰な表現への反発などから、普及はゆっくり進んでいる
- 一部の映像制作者は、過度なHDRによる視覚的な拒否感や疲労感が、かえって技術導入を妨げていると指摘する
互換性とプラットフォームの課題
- 最新のiPhoneの多くはすでにHDR対応が可能だが、状況や環境によってHDRは無効化される(省電力モード、強い日差しなど)
- ほとんどのWebブラウザーではHDR写真の表示が十分にサポートされていない
- そのため Apple、Google などは Adaptive HDR、Ultra HDR 方式を導入し、1つのファイルにSDR/HDR情報を同時に含めている
- Safari、Chrome などのブラウザーやアプリも徐々にHDR対応を広げようとしている
- Apple の Photos アプリなどのバグ、iOS内の対応問題などにより、現実的には全面的な普及には時間がかかる見通しだ
HalideのHDR対応計画
- Halide は Taste の問題を考慮し、標準(Standard)、最大(Max)、オフ(Off) の3つのHDRレベルを提供する予定だ
- 開発者プレビュー版として限定公開を先に進めており、Apple の TestFlight ポリシー上、少数にのみ提供されている
解決策3: SDRという選択を尊重する
- 一部のユーザーは依然としてSDRを好む
- 写真の本質は現実の「記録」よりも、感覚の表現であり、対象に対する多様な解釈であることを強調している
- HDRですべてのディテールを露出すると、かえって「自然さ」や主題への集中が弱まることがある
- アナログおよびSDRスタイルの美学を重視するユーザーも継続して存在する
- Halide は「HDR、SDR、トーンマッピング」など多様なスタイルの選択肢を提供し、アーティストの意図を重視している
結論
- トーンマッピングは写真の歴史において何百年にもわたり重要な機能だった
- HDRディスプレイは、これまで見られなかった画像を生み出す大きな可能性を持っている
- SDRとHDRが共存する未来を前向きに展望している
- ユーザーが自ら方式とスタイルを選べることが中心的な価値である
- 写真の未来と夕焼けの姿は、さらに明るくなる見通しだ
1件のコメント
Hacker Newsのコメント
人間の目はこの両方の状況をうまく見られる。ゲームでよくある不満なのだが、自然な視線はシーンをスキャンしながら継続的に順応している(照明、フォーカスなど)。脳がその情報をひとつの瞬間のように統合してくれる。ところがゲームでの「HDR」や被写界深度のような効果は、むしろ没入感を下げてしまう。ソフトウェアが想定する正確な位置に視線を合わせたときだけ自然で、周辺を見ると非現実的に色が歪んだりぼやけたりする。こうした問題は、視線追跡が標準になるまでは続くだろう。結局のところ、こうした機能は実際に現場にいる感覚ではなく、欠陥の多いビデオカメラで撮影した映像を見ている感じになってしまう。「Film grain」まで加わると、その違いはさらに際立つ。
私はAMO physicsの博士課程なのに、ありふれたカメラの仕組みをよく知らなかった。短期間で学んだが、WaymoやMotionalの初期にはとても重要だった。数年前に作られたHDRに関する面白い動画があって、とてもおすすめだ: https://www.youtube.com/watch?v=bkQJdaGGVM8. デジタル写真を本格的に学びたいなら、StanfordでMarc Levoyが行った講義を勧める: https://www.youtube.com/watch?v=y7HrM-fk_Rc&list=PL8ungNrvUY.... Marc LevoyはGoogleでPixelカメラの開発を成功に導いた後、Adobeで自分のチームを率いている。(スマートフォンの革新がいつもそうであるように、ほどなくして他社も追いついたが)
HDRキャプチャ、HDRフォーマット、HDRディスプレイをひとまとめにして語るのは間違いだと思う。まったく別の概念だ。Ansel AdamsがHDRを使っていたと主張するのは混乱を招きかねず、正確でもない。HDRフォーマット、キャプチャ、編集ワークフローは、HDRディスプレイよりずっと前から存在していた。HDRの最大の利点は、とても明るい部分が飛ばず、とても暗い部分でも色のディテールが失われないことだ。以前は露出を失敗すると修正不能だったが、HDRでは後から露出を調整できる。しかしAdamsは、今のHDRのようなやり方ではなく、当時使っていた媒体に合わせて正確に露出を合わせる達人だった。ネガに記録されていない情報は後から取り出せないのだから、AdamsをHDRユーザーと呼ぶのは余計に混乱させるだけだろう。
ディスプレイでHDRを体験するのは個人的にかなり不快だ。最も明るい白は太陽や強烈な光のようなものにだけ使うべきで、室内写真の壁に使うべきではないと思う。トーンマッピングの例も平板すぎて、ローカルコントラストが不足しているように感じる。
写真家として、HDRコンテンツは魅力的ではあるものの、実用面ではフィードに流れてくる写真が突然画面上で明るくなりすぎて目が痛くなったり、逆に他の白背景がくすんで見えて不自然だ。夜に画面輝度を下げて読んでいてHDR写真が出てくるとさらに下げ、またテキストに戻ると再び上げなければならない。全画面コンテンツ(ゲーム、映画)にはHDRが向いているが、普段のコンピューティングではむしろユーザーにショックを与える体験だ。
テレビ、映画、写真業界では、インフラの更新に何十億ドルもの費用と果てしない時間がかかるし、消費者側も同じだ。私も4kやHDRディスプレイは持っておらず、テレビが壊れるまではHDRテレビを、会社のモニターを交換するまでは4kモニターも買わないつもりだ。
AIはユーザーの意図を読めない。ソフトウェア開発で誰に本当の「勘」があるかを見分ける基準でもある。コンピュータは人間のように意図を推論したり心を読んだりはできない。
アナログ写真でも補正現像液を使えば暗部や明部をより精密に調整できるし、stand developmentのように薄く希釈した現像液に長時間浸す方法もある。だからダッジとバーンだけがダイナミックレンジを高める唯一の手段ではない。HDRが適用されたスマートフォン写真については不満が多い。シャドウとハイライトが消えてしまい、創作ツールとしては使いにくいが、家族写真のような記録用としては使える。
90年代の業務用ビデオ/映画業界で始まって現在に至るまで、「HDR」の意味がどう進化してきたかを見るのは興味深い。昔はSDRがおよそ8ストップ、HDRは10ストップ以上のダイナミックレンジを意味すると考えられており、色のプライマリや伝達関数マッピングに注意が向けられていた。今では人々は「HDR」という言葉で複数の概念を一括りにしている。実際に知っておくべきなのは次の3つだ。
HDRは何にでもなり得るし、何でもないとも言える。いま初心者に伝えたいポイントは、色と輝度を「絶対値」という概念で扱うことだ。適応型マッピングのように、ディスプレイの特性に応じて情報が自動適用されることを理解するのも重要だ。
HNのみんな、HDRモニターは買う価値があるだろうか。10年ほど前にそろそろ出るという噂を聞いて待っていたが、自分が買える価格帯には来なかった。今また関心を持つべきか悩んでいる。HDRの有用性には議論の余地がないと思う。屋外の風景を肉眼で見るのと、写真を撮って画面で見るのとの差は明らかだ。