1 ポイント 投稿者 GN⁺ 2025-05-02 | 1件のコメント | WhatsAppで共有
  • マウリッツハイス美術館所蔵のフェルメール作品を1080億ピクセルのインタラクティブ画像として公開し、肉眼では見えにくい表面の細部までWeb上で探索できる
  • 2022年、HIROX EUROPE / JYFELのEmilien LeonhardtとVincent Sabatierが41,106個の3Dマルチフォーカスファイルをスティッチングし、制作全体には200万枚以上の画像が使われた
  • 撮影にはHIROX digital microscope HRX-01、HR-1020Eレンズ、90x偏光フィルター、HIROX T-standが使用され、解像度は1ピクセルあたり1.3µm
  • ビューアーはダブルクリックでの拡大、90xの注目ポイントサムネイル、140xの詳細スキャン、3Dモデル操作、測定と共有機能を提供する
  • このデータは表面状態、顔料、ひび割れ、修復痕の確認に活用でき、今後の比較のための高精度デジタル記録として残る

1080億ピクセルスキャンの制作方法

  • 2022年、Emilien LeonhardtとVincent SabatierがHIROX EUROPE / JYFELで1080億ピクセルのパノラマを制作した
  • 中核となる作業は、41,106個の個別3Dマルチフォーカスファイルをつなぎ合わせる方式
    • 各ファイルには約50枚の画像レイヤーが含まれる
    • レイヤーは自動的に1枚の完全に焦点が合った画像へ結合される
    • 最終的なマルチフォーカス画像をスティッチングするために、全体で200万枚以上の画像が使用された
  • 2018年には先に100億ピクセルスキャンが制作されたが、35xスキャンでは表面全体を3Dで捉えるには拡大率が十分ではなかった
  • 超高解像度撮影にはHIROX digital microscope HRX-01HR-1020Eレンズが使用された
    • 90x倍率の偏光フィルターを装着
    • 解像度は1ピクセルあたり1.3µm
  • 顕微鏡レンズは、完全電動式XYZスキャニングプラットフォームであるHIROX T-standに取り付けられた
    • このT-standは、RijksmuseumのRembrandt作品Night Watchの調査用に最初に開発された
    • 現在は複数の美術館で使用されている
  • HIROX Nano Point Scanner(NPS) は、T-standの電動軸を絵画と整列させ、作品の最も高い点と低い点を特定するために使われる
    • NPSが定めた基準限界が、HRX-01ギガピクセルスキャンの基盤となった
  • HIROX Rotary Headは、目や真珠など特定部分を複数の角度から撮影する映像制作に使用された

インタラクティブビューアーと3D活用

  • Webビューアーは、絵画全体と詳細領域を行き来できるインタラクティブインターフェースを提供する
    • マウススクロールで拡大し、ドラッグで移動する
    • SHIFTは拡大、CONTROLは縮小、矢印キーは移動に使用される
    • ダブルクリックするとマウス位置を中心に拡大され、140x詳細スキャンでも同じように動作する
  • サムネイルとショートカットキーで注目ポイントへ素早くアクセスできる
    • 左上には絵画の90x詳細サムネイルが表示される
    • 左下には140x詳細スキャンへ移動するサムネイルがある
    • 15キーは90x詳細領域の拡大に、0キーは全体縮小に使用される
  • 右側メニューには、探索と記録のためのツールがまとめられている
    • Measure: 絵画内で測定し、測定モードでさらに拡大したり、共有機能で測定結果を共有したりできる
    • Minimap: 拡大状態で注目ポイントへ素早く移動し、緑色の四角形をドラッグしたりスクロールで拡大したりできる
    • Video: 関連映像をインターフェース内で見られる
    • Share this View: 現在のビューをURLとしてクリップボードにコピーし、共有できる
    • Screenshot: インターフェースと白い枠なしでスクリーンショットを作成し、コンピューターに保存できる
    • FullscreenMenu: 全画面表示への切り替えとインターフェースの非表示をサポートする
  • 成果物は単なる2D画像にとどまらず、3D表現も含む
    • 3Dメニューで複数の詳細ポイントを見られる
    • モデルは拡大、回転、移動が可能
  • 3Dデータは、Mauritshuisに展示された4m × 3.5mサイズの『Girl with a Pearl Earring』3Dプリント制作にも使用された
    • 展示はオランダ・The HagueのMauritshuisで2023年末まで行われた
  • 超高解像度画像は、美術品修復作業に必要な表面研究資料として活用できる
    • 顔料分析
    • 表面状態のモニタリング
    • ひび割れと修復痕の識別
    • 今後の参照に向けた包括的なデジタル記録の確保

1件のコメント

 
GN⁺ 2025-05-02
Hacker News のコメント
  • この絵を見ていると、少女のに視線を奪われた。
    全体で見ると、下唇はふっくらして潤っているどころか、少し濡れているように見えるのに、拡大すると、白を一度置いた部分が、口の解剖学的な左側の輪郭を示すぼんやりした塊に近い。
    小説を書き始めたばかりで、読者が隙間を埋めてくれると信じる方法を学んでいるところなのだが、絵を見るときにも私たちが似たようなことをしているという並行関係が、急に腑に落ちた。

    • 印象派の作品を実際に見る機会があれば、同じ理由でかなり衝撃を受ける。
      嵐の中の船の場面を見てさまざまなニュアンスを感じていたのに、近づいてみると、実は脳が空白を埋めていたのだと気づく。
      文学の分野では、Italo Calvino の “Invisible Cities” と Amal El-Mohtar・Max Gladstone の “This Is How You Lose the Time War” がその方面のマスタークラスで、わずか一、二段落の描写だけで、読者を鮮明で幻想的な場所の中へ連れていってくれる。
    • 映画 Clueless にこんなセリフがあった。「あの男は完全に Monet よ。遠くから見ると素敵だけど、近くで見ると完全にめちゃくちゃだから」
    • 「頭の中で隙間を埋める」ということは、照明や点描法など、絵を描かない人にははっきりしないさまざまな現象に広く当てはまる。
      ただ、Vermeer は特に当時の基準から見ても一段上で、彼が成果を得るために camera obscura を使っていたと見る歴史家がますます増えている。
      https://en.wikipedia.org/wiki/Hockney%E2%80%93Falco_thesis
    • 遠くから見ると、脳が「部屋」の中の光を分析し、その文脈と比較して唇が潤って見える。
      拡大すると基準点が消え、脳が「実際の場面」の分析から抽象的な解釈へ切り替わるように思える。
      周囲の影と脳の仮定のせいで2つの灰色が違って見えるが、実際の RGB 値は同じ、という錯視に似ている。
    • 拡大するとぼんやりした塊のように見えるのは、ピクセル化のアナログ版のようだ。
  • Vermeer が絵を描くときにライトボックスのような装置を使っていた可能性を扱った映画 “Tim's Vermeer” を強くおすすめする。
    特に光と色を再現する能力は比類がないが、彼は画家としての基礎訓練しか受けておらず、制作している姿を誰にも見せなかった。
    どうやってそれを成し遂げたのかを推論していく過程が、魅力的な工学上の問題のように感じられる。

    • 魅力的な仮説ではあるが、反対するかなり説得力のある証拠もある [0]。
      専門家ではないが、これは大衆史や疑似歴史の範疇に入るかもしれないと思う。
      [0] https://skeptoid.com/episodes/4707
    • 悪い仮説ではない。
      多くの人は、“The Astronomer” と “The Geographer” のモデルは最初の顕微鏡を作った Leeuwenhoek だったと推測しており、彼は Vermeer の親しい友人だった。
      当時は絵を補助する装置を使うこともかなり一般的で、Durer や Da Vinci もそうした装置の図面を残している。
    • 「普通は精密工作機械[旋盤]を半分に切って使ったりはしませんが……電動工具はその場で改造するために作られているんですよ」— Tim
    • あの映画は、むしろ見ないことを強くおすすめする。
      中心人物の Tim Jenison は、芸術を技法に還元し、周囲の人を見下す傲慢な何でも屋のように見えた。
      映画の中で彼は何度も「これはやったことがないけど、どれほど難しいっていうんだ?」と言う。
      第一に、彼の絵がそんなに素晴らしいのなら、なぜあちこちで展示されないのか。何人かのいわゆる専門家が批判なしに称賛するが、結局その作品は彼の寝室の壁に掛かる。
      本当にそれほど簡単に再現できる芸術なら、ギャラリーが彼の作品を求めていたはずだ。
      第二に、映画は実際の絵をきちんと見せていない。
      ある場面では、その絵が誰も近づけない奥の部屋に隠されているという陰謀のように見せることさえある。
      実物と Tim の再現作を並べて見たかったし、アクセスを強く押し進めなかった理由は、そうすると映画の物語が崩れてしまう可能性が高かったからに見える。
  • Steve Mould が、この絵の3D レリーフをキャプチャするのに使われた顕微鏡技法を扱った動画をちょうど公開した: https://youtu.be/o-dZKBwbsis

    • ここで使われている顕微鏡は本当に驚くべきものだ。
      欲しいけれど必要はないものリストに、ぴったり入る。
    • 同じ方式だったのだろうか? 3D レリーフには、ハイトマップが作るものに似たアーティファクトが見える。
  • ハーグの Mauritshuis 美術館でこの絵を見たけれど、いくつか面白い点があった。
    思ったより小さく、筆致がよく分からないほど少しぼやけているというか霞んでいる。それでも非常に表現力が強い。
    ただ、自分がいちばん好きな Vermeer はこの作品ではなく、同じ Mauritshuis にある View of Delft。
    色、色調、質感が本当に驚くほどすばらしい。
    ブラジル人にとっては面白い事実もある。Mauritshuis は「Maurice の家」という意味で、実際にブラジルのオランダ植民地総督だった Maurice of Nassau(Maurício de Nassau)の旧邸宅。
    この美術館には Rugendas やほかの画家が描いた植民地時代ブラジルの生活を描いた作品や、植民地時代インドネシアの生活を示すパン生地人形のコレクションもある。
    Mauritshuis はハーグを訪れる十分な理由になるし、行くなら M.C. Escher 美術館にも歩いて立ち寄る価値がある。

    • View of Delft は本当に美しい!
      https://upload.wikimedia.org/wikipedia/commons/a/a2/Vermeer-...
    • 自分がいちばん好きなのは The Little Street(https://www.johannesvermeer.org/the-little-street.jsp)。
      あの静かで落ち着いた雰囲気がとても好き。
      オンラインの安価なアジア系油絵制作業者に複製を頼んだことがある。絵より額縁のほうが高かったけれど、画家がかなり上手く描いてくれて驚いた。
      数年前にアムステルダムへ行ったとき、本物をぜひ見に行こうと思い、自分の複製をどれくらい正確に覚えていて直接比べられるか気になっていた。
      十分に覚えていたし、真作を見て完全に圧倒された。
      複製も気に入っているけれど、やはり同じものではなかった。
  • この絵は Baumgartner 式の保存修復がかなり必要そうに見える。
    私たちから見て左側、つまり絵の中の右目の周辺に加筆の跡がある。
    背景と眉の部分があまりに滑らかで、絵のほかの部分と同じひび割れの質感がない。
    ワニスもかなり黄変している可能性がある。
    頭の上の青い布の上にある布を見ると、本来は明るい白だったのかもしれないが、最後に塗られたワニスが紫外線下で劣化・黄変し、今は黄色く見えているようだ。

    • 当時の多くの画家が鑑賞角度を補正するために、意図的に 遠近法を歪めたことも考える必要がある。
      https://en.wikipedia.org/wiki/Homography
      美しさは複雑で、不完全さそのものが時代を超えた教訓になることもある。
      https://sambourque.com/blog/kintsugi-beauty-in-imperfection
      ある人には、人生を経て人が成長していくことの寓話のように見え、別の人にはただ割れた陶器にすぎない。
    • 彼の修復動画は最初から最後まで見ているけれど、技術的でないナレーションは高級感を出そうとして、かえって偽物っぽく感じられて疲れる。
      保存修復の分野は彼の動画の外ではよく知らないが、技術作業は良さそうに見える。
      保存修復家たちからかなり批判されたと聞いたけれど、それはよく理解できない。一方で、動画の批判コメントに積極的に反論していたというのは、少し器が小さいように感じる。
      2週続けて新しい動画を上げていないので、もどかしい。
      ちなみに牛の蹄を整える動画も見ている。芸術、蹄の手入れ、ソフトウェア開発、歴史、アクション映画、科学、料理、中世、テーブル製作みたいな変な視聴リストを持つ人がどれくらいいるのか、いつも気になっている。
      いくつかは自分でもかなりやったことがあり、いくつかはまったくない。生きた牛は2回見たことがある。
  • ひび割れを拡大すると ひびの縁のベベルが見えて、本当にすごい。
    暗い背景のひび割れの縁のあちこちに青やピンクがかった色が見えるのだが、照明のせいなのか実際の色なのか気になる。
    実際の色だとしたら、なぜそうなるのか分かる人はいるだろうか。

    • いくつもの場所で、ひび割れが 上塗りされたり埋められたりしているように見える。おそらく修復によるものだろう。
      探してみると、修復前の状態と推定される分析画像がある。
      https://media.springernature.com/lw685/springer-static/image...
      「紫外線蛍光では天然樹脂ワニス層が緑がかった蛍光を発し、1994年に補彩された領域はより暗く見えるため、元の絵具と区別できる」
      論文全文: https://www.nature.com/articles/s40494-019-0307-5
    • 左頬に補修の跡が見えるような気がする。
      ひびに沿った、より明るい 充填材 の線のように見える。
  • 美しい絵だ。
    同時に、私は見ること自体がつらい。
    車輪付きゴミ箱、リサイクルボックス、庭のフェンス、枕、スマホケース、ポスターなど、ありとあらゆる物の キッチュな背景として使われすぎていて、今では連想するだけで悪趣味がべっとりまとわりついてくる感じがする。
    かわいそうな少女。

    • NL という接尾辞を見るとオランダにいるようだが、オランダ国外ではこの絵をそこまで頻繁に見ないので、言うほど使い古されてはいない。
      Vermeer が camera-obscura を使ったかどうかに関係なく、今でも本当に優れた芸術作品だと思う。
  • この作業を行った会社が YouTube に 制作過程を載せている: https://youtu.be/j_MvpMlgfwI?si=mK9LWleFBE8r_saz

  • こういう古典絵画を 分解して分析する作業はあるのだろうか。
    筆致をもとに絵を分析する AI プロジェクトを考えてきたのだが、最終的な結果は、真っ白なキャンバスから完成まで描かれていくアニメーションになると思う。

  • これをレンダリングするのに何を使っているのか知っている人はいる? 地図タイルのような方式なのかな?