キヤノン「EOS R1 / R5 Mark II」カメラ内アップスケーリング(高画質化)とWindows高解像度化、高画質化ツール「Aiarty Image Enhancer」「Upscayl」によるアップスケーリングを比較してみた。

2024-08-17 · 写真・カメラ

キヤノン「EOS R1 / R5 Mark II」が発表されている。「EOS R1 / R5 Mark II」には、「カメラ内アップスケーリング」機能がある。

高画質×高速 EOS R5 Mark II:レンズ交換式カメラ・レンズミラーレスカメラ EOS R5 Mark IIの高画質×高速について紹介しているページです。Canon(Japan)

このページでは、以下のように説明されている。

【カメラ内アップスケーリング】

『撮影後、縦横の画素数をそれぞれ2倍、全画素数を4倍に変換し、約1億7900万画素まで画像の拡大が可能。作品展などの大判出力にも対応できます。IBISハイレゾ撮影とは異なり1枚の画像で、高解像度な画像を生成。カメラ内で処理するためPCを介さずそのまま投稿/送信できます。トリミングと同時にカメラ内アップスケーリングを行うことも可能で、高解像度の画像を生成してからトリミングを行うよりも処理時間が高速です。生成時は、撮影画像の解像感を保ちながら、元画像から逸脱した画像を描写しないようにアルゴリズムをチューニングしています。』

R5 Mark II では、8192×5464ピクセルの画像が16384×10928ピクセルになる。

「Digital Camera World」のページには、以下のような記述がある。

OH. MY. GOD. Canon's in-camera AI is going to change everythingCanon's EOS R1 and R5 Mark II can upscale images 400% and remove 2 sto…Digital Camera World

『Unlike post-production software such as Topaz, which has to use guesswork and AI to interpolate and completely invent the pixels and data when it upscales your images, Canon's technology doesn't have to guess anything: it knows everything about your image using the information recorded to the camera at the moment of capture. 

It knows what lens you used, the aberrations created by its optical formula, the ISO sensitivity and the noise it introduces, the aperture and its effect on defocus, the white balance, the bit depth… in short, this isn't in the same ballpark as third-party upscaling software that just guesstimates these values. Canon's tech simply embellishes all the information it already has about your photo.』

日本語に翻訳すると、

『Topazなどのポストプロダクションソフトウェアでは、画像を拡大するときに推測とAIを使用してピクセルとデータを補間し、完全に作り出す必要がありますが、キヤノンのテクノロジーでは何も推測する必要がありません。撮影時にカメラに記録された情報を使用して、画像に関するすべてを把握します。

このソフトウェアは、使用したレンズ、その光学式によって生じる収差、ISO感度とそれがもたらすノイズ、絞りとそれが焦点ぼけに与える影響、ホワイトバランス、ビット深度を把握しています。つまり、これらの値を推測するだけのサードパーティのアップスケーリングソフトウェアとはレベルが違います。キヤノンの技術は、写真に関してすでに持っているすべての情報を単純に装飾するだけです。』

ただ、「EOS R1 / R5 Mark II カメラ内アップスケーリング」は、RAWではなくJPEGをインプットとして処理されることを考えると、『キヤノンのテクノロジーでは何も推測する必要がありません。』という説明には疑問が残る。

また、撮影時にリアルタイムで処理される訳ではなく、カメラ内で後処理として行うことになる。膨大な撮影枚数から該当の画像を選んで処理するのは面倒な気がする。できれば、PC等で処理したい。

以下で、Windows高解像度化ツール「Aiarty Image Enhancer(AI. Image Enhancer)」「Upscayl」によるアップスケーリングとの画質比較を行ってみるが、アップスケーリング処理にはGPUのないPCでは相当な処理時間を要する。この処理がカメラ内で数秒程度で処理できるなら、それはそれで凄いことなのかもしれない。

個人的な希望では、この画素補間技術を使ってリアルタイムの2倍デジタルテレコン機能を実現させてほしい。

アップスケーリングの画像比較には、「DPReview」の以下のページに載っている写真を使わせてもらう。

https://www.dpreview.com/samples/4066714833/canon-eos-r5-ii-pre-production-sample-gallery

オリジナル元画像(縮小画像)

オリジナルトリミング画像(600×600)

このオリジナルトリミング画像(600×600)を元に解像度を縦横2倍(面積4倍)にする。

GIMP 拡大(1200×1200)

R5 Mark II カメラ内アップスケーリング画像(1200×1200)

AI. Image Enhancer:細部加工 GAN(1200×1200)

AI. Image Enhancer:鮮明化 Diff(1200×1200)

AI. Image Enhancer:写真向け(1200×1200)

Upscayl:GENERAL PHOTO(REAL-ESRGAN)(1200×1200)

Upscayl:GENERAL PHOTO(FAST REAL-ESRGAN)(1200×1200)

Upscayl:GENERAL PHOTO(REMACRI)(1200×1200)

Upscayl:GENERAL PHOTO(ULTRA MIX BALANCED)(1200×1200)

Upscayl:GENERAL PHOTO(ULTRASHARP)(1200×1200)

Upscayl:DIGITAL ART(1200×1200)

判断がなかなか難しいが、「EOS R1 / R5 Mark II カメラ内アップスケーリング」の画像は、オリジナル画像の質感を残したまま、無理のない範囲で解像度を上げているような気がする。

これらの画像だけでは判断が難しいので、それぞれの画像を拡大して切り取ってみた。拡大してみると、どれも結構違和感がある。やはり、「R5 Mark II カメラ内アップスケーリング」が一番自然な感じか。

オリジナル画像 | R5 Mark II カメラ内アップスケーリング
オリジナル画像 | AI. Image Enhancer:細部加工 GAN
オリジナル画像 | AI. Image Enhancer:鮮明化 Diff
オリジナル画像 | AI. Image Enhancer:写真向け
オリジナル画像 | Upscayl:GENERAL PHOTO(REAL-ESRGAN)
オリジナル画像 | Upscayl:GENERAL PHOTO(FAST REAL-ESRGAN)
オリジナル画像 | Upscayl:GENERAL PHOTO(REMACRI)
オリジナル画像 | Upscayl:GENERAL PHOTO(ULTRA MIX BALANCED)
オリジナル画像 | Upscayl:GENERAL PHOTO(ULTRASHARP)
オリジナル画像 | Upscayl:DIGITAL ART

別の画像でも試してみる。以下の「fotopolis」の画像を使わせてもらう。

Canon EOS R5 Mark II – pierwsze wrażenia i zdjęcia przykładowe [RAW]Nowa warstwowa matryca 45 Mp, wideo 8K 60p, dodatkowy procesor, który …fotopolis.pl

オリジナル元画像(縮小画像)

オリジナルトリミング画像(600×600)

このオリジナルトリミング画像(600×600)を元に解像度を縦横2倍(面積4倍)にする。

GIMP 拡大(1200×1200)

R5 Mark II カメラ内アップスケーリング画像(1200×1200)

AI. Image Enhancer:細部加工 GAN(1200×1200)

AI. Image Enhancer:鮮明化 Diff(1200×1200)

AI. Image Enhancer:写真向け(1200×1200)

Upscayl:GENERAL PHOTO(REAL-ESRGAN)(1200×1200)

Upscayl:GENERAL PHOTO(FAST REAL-ESRGAN)(1200×1200)

Upscayl:GENERAL PHOTO(REMACRI)(1200×1200)

Upscayl:GENERAL PHOTO(ULTRA MIX BALANCED)(1200×1200)

Upscayl:GENERAL PHOTO(ULTRASHARP)(1200×1200)

Upscayl:DIGITAL ART(1200×1200)

「AI. Image Enhancer:細部加工 GAN」が一番くっきりしている感じがするが、画像全体でみた自然さは分からない。実際に画像全体をA3プリンターぐらいで印刷してみないと、どれが良いのか判断が難しいかも。

写真解像度を上げる(アップスケーリング、高画質化)Windowsアプリ「Aiarty Image Enhancer」を試してみた。使えるレベル。以前、写真の解像度を上げる(アップスケーリング)Webサービスアプリ「Upscale.media」、「AI Image Enlarger」、…晴歩雨描 ·

写真解像度を上げる(アップスケーリング、高画質化)Windows無料アプリ「Upscayl」を試してみた。先日、写真解像度を上げる(アップスケーリング)Windowsアプリ「Aiarty Image Enhancer(AI. Image Enha…晴歩雨描 ·

「Adobe スーパー解像度」と写真解像度を上げる(アップスケーリング、高画質化)Windowsアプリ「Aiarty Image Enhancer」を比較。写真解像度を上げる(アップスケーリング、高画質化)Windowsアプリ「 Aiarty Image Enhancer 」を試してきた。 今回…晴歩雨描 ·

写真の高画質化/鮮明化Windowsアプリ「Aiarty Image Enhancer」「Upscayl」最新版で、等倍高画質化(アップスケーリングなし)を野鳥写真で比較。先日、写真の高画質化Webツールで、アップスケーリングなしの高画質化の検証をしたが、使えるレベルのものはなかった。 今回、写真の高画質化/鮮…晴歩雨描 ·

ミラーレスカメラ:トリミング耐性、等倍画質比較。DPREVIEW、Imaging Resourceの画像を1024×768で部分切り取り。「 DPREVIEW:Studio shot comparison 」の写真を利用して、最近の主なミラーレスカメラのトリミング耐性、等倍画質…晴歩雨描 ·

写真の明るさ補正、色補正、色加工ブログ記事まとめ。このブログの「写真補正・加工ノウハウ記事一覧」は以下。 この中から、写真のアート加工記事をまとめたのが以下。 ■ 明るさ補正、色補正、色加工…晴歩雨描 ·

Webブラウザで写真加工ができるサイト「Polarr」で、色の調整と、もや・かすみの除去を試す。おすすめ。先ほど、 Webブラウザ で写真加工ができるサイト「Polarr」の「フィルター」を試してみた。 「Polarr」のサイトは以下。 【Onl…晴歩雨描 ·

GIMPのトーンカーブで写真をレトロっぽくする。色補正加工。先日、GIMP用プラグインスクリプト「Cross processing effect...」を使って、写真をレトロ風にしてみた。 以下、左が…晴歩雨描 ·

「Photoshop Express」のモノクロ(白黒)ピンホール写真がなかなかいい感じ。写真加工。先日、キヤノン EOS M200+EF-M11-22mm F4-5.6(35mm判換算焦点距離18-35mm)で撮影した写真を、 Windo…晴歩雨描 ·

写真でアート:GIMPプラグイン「G'MIC」の「Artistic」フィルター[Black Crayon Graffiti][Ellipsionism][Hough Sketch]を使って写真をアート加工。★GIMP を使った写真アート加工シリーズ。 今回の素材は、昨日、OLYMPUS Tough TG-5で撮った写真。 今回、GIMPプラグイン…晴歩雨描 ·

Photoshopを使わずに、GIMPで簡単な手順で写真をイラスト風にする(続き)。単色カラーマスク合成。レイヤーで重ね合わせ。アート加工。★↑ の続き。 「G'MIC」フィルター[Colors]の[Boost Chromaticity]を使ってイラスト化した以下の画像を使って、更…晴歩雨描 ·