iPhone 12 Pro Maxのカメラ 〜Deep FusionとスマートHDR 3〜

（画像：iFixit）

私はiPhone XS Maxから12 Pro Maxに替えました。

ですから、Deep Fusionは、はじめて使う機能です。

説明では、露出が異なる複数のフレーム（写真）をA14 BionicのNeural Engineがピクセル単位で賢く合成して豊かな細部を持った写真に仕上げる……というようなことが書かれていますが、それってスマートHDRとどう違うの？また、どんな時にDeep Fusionは機能するの？

漠然とは理解できるけど、普通に撮った写真とどれくらい違いが出るのか、Deep FusionとスマートHDRの違いはなんなのか……Deep Fusionの実態を見てみたいと思いました。

まずは、Deep Fusionが、どんな時に機能するのか。

こちらはiPhone 11当時の記事ですが『「Deep Fusion」って何ですか? - いまさら聞けないiPhoneのなぜ』Deep Fusionのことが詳しく説明されています。

その中に、このようなことが書かれています。

「通常の明るさではスマートHDRで撮影され、中間の明るさより暗いと判断されるとDeep Fusionに、さらに暗くなるとナイトモードにへと切り替わります。」

どうやら、明るさによって機能するモードが判断されるようだ。

AppleのiPhone 12 Proの製品紹介ページにも「中程度の光量と抵光量の間の環境ではそうはいきません。そこでDeep Fusionという機能が活躍」と書いてあります。

違いを見るためには、Deep Fusionのオン／オフを任意で切り替えできなければなりません。

スマートHDRは設定項目でオフにするとカメラアプリでオン／オフができるボタンが表示されるようになりますが、Deep Fusionにはそのような設定はありません。

調べてみると、Deep Fusionはいくつかの条件下でオフになるようです。

『細かいところが確かに違う、iPhone 11シリーズのDeep Fusionをオン/オフして撮り比べよう』

この記事によると、Deep Fusionが無効になるのは、

・バーストモードのとき

・超広角レンズ(ウルトラワイドカメラ)で撮影するとき

・『写真のフレームの外側を含めて撮影』スイッチがオンの状態で撮影するとき

とのことです。

すなわち、

・バーストモードで撮影すれば、Deep FusionもスマートHDRもオフになる。

・カメラアプリの「HDR」ボタンをオフにして単写すればDeep Fusionが機能した写真。

・「HDR」ボタンをオンにすればスマートHDR 3の写真が撮れる。

ということになるのでは？

日の入り間近の時間で撮り比べてみました。

・バーストモードで撮影した通常写真とDeep Fusionが機能したと思われる写真の拡大画像

違いが出ました。Deep Fusionはノイズが軽減されています。

・Deep FusionとスマートHDR 3の比較

スマートHDR 3は、コントラストがはっきりとして、ぐっと引き締まった写真になりました。

・通常写真とスマートHDR 3

ここまで違いが出るとは思いませんでした。

しかし、撮影を重ねていくうちに、Deep Fusionは本当に明るさによって機能するかどうか決まるのだろうか？と疑問を持つようになりました。

気になったので試してみました。

・通常写真とDeep Fusion

Deep Fusionでは、影になっているビルのノイズが軽減されています。

・Deep FusionとスマートHDR 3

スマートHDRでは、陽の当たっている白いビルの壁面の白とびが軽減されています。

・スマートHDR 3と通常写真

クレーンと建築中のビルを覆うネットや道路標識などにディテールの違いが見てとれます。

少なくとも、iPhone 12 Pro Maxでは、明るさに関係なくDeep FusionからスマートHDR 3まで機能するようです。

もうこれは、常時、スマートHDRをオンにして、A14 Bionicに任せておけばいいのではないでしょうか。

iPhone XS Maxでは、スマートHDRの設定に「通常の写真を残す」という項目があります。

これをオンにしておくと、スマートHDRの写真と同時に通常の写真も保存され、スマートHDRで撮影された写真には「HDR」のマークが付き判別できるようになっていました。

iPhone 12 Proでは、その設定項目も「HDR」のマークも付かなくなり、どれがHDRで撮影された写真か区別がつかなくなりました。Exifを見ても分かりません。

A14 BionicのNeural Engineは、もはやHDRの写真を当たり前のこととしているかのようです。

Appleは、iPhone 12シリーズ発表の場（キーノート）で、しきりに「コンピュテーショナルフォトグラフィー」という言葉を使っていました。

その時は、そんなに"合成写真"に自信があるのか？それよりも12 Pro Maxのセンサーサイズ拡大のほうが重要だろう、と思っていましたが、こうして撮り比べてみた結果、

「そうか……そうなのか……A14 Bionicよ」

と、それ以上、何も言えなくなりました。

Deep Fusion、スマートHDR 3も完璧ではありません。

動きの大きな被写体は、やはり苦手なようです。

下の写真では、前脚や日の丸に分かりやすい残像が出ています。

なぜiPhoneの画面を写した写真なのかというと、スクリーンショットでは、この残像が消えてしまうからです。

Deep Fusionの謎は、まだ深い。