超解像ズーム（４／２９）
◆　スマートフォンのディジタルズームの進化は凄いものがある。凄いものがあるのだが、やり過ぎの面も出てきている。GALAXYで月を撮ると、例えぼけた写真でもちゃんとした月に変更してくれるという、アレである。

◆　少し前に話題になったのはiPhoneのディジタルズームで、日本語の文字がAIで作った時のような象形文字のようなものに変更されてしまうと言うもの。GALAXYやXperiaでは単に解像度が低下して見えるだけなのだが、iPhoneの場合は何やら文字のようなものが生成されている。

◆　超解像ディジタルズームの処理は無から有を作る処理である。情報がない部分がどうなっているのかを予測して、情報の無い部分を埋めていく。これは写真から特定の物体を消し、その背景部分を作るのと同じような感じだ。これも細部の処理はスマートフォンによって異なるが、よく見れば不自然さが分かる位の精度のものが多い。

◆　おそらく時間をかけた処理を行えば精度は上がるのだろうが、リアルタイムに近い時間で処理をしなければならないので、自ずと妥協点はある。モノクロ写真に着色をするにしても同様だし、フレームレートを上げる処理も精度を上げれば演算量が増えていく。

◆　超解像ディジタルズームで例えば"国"が"回"になるのなら(いや、なってはいけないのだが)まだ分かるが、"国"が"川"にはなってほしくない。しかしXに投稿されたレポートでは、iPhone15ではあり得ない文字などが生成されていた。画像加工ではないかと疑うコメントに対して、iPhoneの画面を別のスマートフォンで撮影しながら実験していた。

◆　NECのレポートだったと思うのだが、超解像処理を行うと輪郭強調では得られない補完効果が得られるが、文字に関しては適切な効果が得られにくいような事が書かれていた。

◆　例えば写真から特定の画像を消す処理に於いて、背景が全て意味のある文字列だったとしたらどうなるだろう。しかし写っているものが文字かどうかを判断するのは容易ではなく、超解像処理にも限界がある。超解像処理を進めていけば画像そのものは綺麗に見えるが、そこに文字などがあると破綻が見え始める。

◆　背景や前景ボケの処理もここ何年かでかなり良くなった。これもプロセッサの処理能力の向上とアルゴリズムの適正化によるものだろう。従ってディジタルズーム処理も今後改善されていくのは間違いない。だからといって情報の無い部分を埋めるには限界がある。

◆　レンズの歪みや収差補正も今では一般的になった。だからレンズ性能はどうでも良いとは言わないし、解像度に関してはディジタルズーム同様で情報がそこに存在する必要がある。情報があればそれを加工する事は出来るが、無から有を作ると破綻する可能性がある。

◆　レンズも単焦点であれば補正は余り難しくはないが、連続可変焦点距離となると各焦点距離やその状態でのフォーカスの位置で補正値が異なる。さらにはレンズシステム自体が安定している必要があって、そうでないと個別に補正値を書き込んでいかなければならなくなってしまう。高価なレンズならばそのレンズ専用の補正値を作る事が出来るが、スマートフォンのカメラで一々それをやっていたら製造コストと時間が大変だ。そうした手間というかコストを考えると、スマートフォンへの光学ズーム搭載は敷居が高いと言う事だ。