デジカメinfo

アップスケーリングはスマホにも高画素センサーにもセンサーシフト系の高画素化にも勝てないような気がします…

キヤノンはそれは二年前の話、その当時はウケが悪かったかもしれませんが、
今はだいぶAI処理に関しては当たり前になりつつあるし、画質として不利なマイクロフォーサーズがやるのはいいトライだと思いました。

ピクセルシフトでは他の機能と同時に使うのが難しいんでしょうね。
PCでのソフトウェアによるアップスケーリングより優秀でRAW保存できるのであればよさそうに思います。

R5 Mark II や R1 を買う層に受けが悪いのは
まぁなんとなく分かります。

ただ、センサーの限界にずっと苦しんでいる
マイクロフォーサーズに関しては
もうソフトウェア処理で戦うしかないでしょう。

スマホのAI処理は良くも悪くも映え重視すぎるので、
そこまではいかずにバランスを取った所を目指してほしいです。

オリジナルRawデからAI処理する手間が省けるなら、歓迎されるかも知れないですね。
ただ、どこまでが自分が捉えた真実なのかを考えてしまうかも。

【鳥を撮影するカメラマンにとっては「やはり解像度が重要だ」】
鳥も撮るイチユーザーとして言わせてもらうと、現在の技術でもってのアップスケーリングは愚策です。
というのも、鳥ならば羽毛等ごく細い線を出したくなるものです。
これがアップスケーリングしたところで写っていない線は作れない。
ただの引き伸ばしに過ぎず、羽毛のディテールは太くバッキバキになり、本来求める自然な生き物の繊細さとはかけ離れていきます。
風景も撮るので伝えやすい感覚としては、何十m先にある葉の形もとい葉脈1本1本をどう写し切るかみたいなものです。

とはいえ風景の広角寄りではそこまで求めない場合がほとんどなので、その場合に真価が発揮され有用な機能になると考えてます。

鳥的には作った映像は所詮Fakeなので、必ずOff機能は付けて欲しいです。
それよりはとりあえず連写してあとで時間のある時ゆっくり画像合成してくれる機能の方が有難いです。
合成するコマ数も選べると有難いです。

連写(プロキャプチャ含む)でどの程度使えるかでしょうかね。
制約が多いのなら、後でPure Raw使った方がいいかも。

解像度と言うけど具体的に何千万画素必要なのでしょうか。
一般層なら2000万画素で十分でしょうし、ハイアマ層なら編集で画素数は増やせる時代です。
高画質を伴う高画素が必要であれば、そもそもマイクロフォーサーズを選びません。
画質はパナソニックの最上級クラスのカメラならもう何も不足がないレベルに達しているので、OMもそこを目指せば良いだけだと思います。

コンピューテーショナル･フォトグラフィーに主軸がAIで処理は賛否両論ありそうで新しい世代になり得るのか気になりますね。

ちょっと前の記事でアップスケーリングをやってみてはと書きましたが、検討しているのですね
m4/3ならセンサーを高画素化したとしてもLUMIXの25MBから27MB程度までにとどめた方がいいでしょうから、品質次第でアリだと自分は思います
それは話が違うと思われるかもしれませんが、ゲームは2Kレンダリングを4Kにアップスケーリングして表示したりするのがもう当たり前で誰も疑問に思ってない
誰もが後編集をガッツリやる訳ではないですし、撮影時にできる意義は十分あるんじゃないでしょうか

アップスケーリングですが、AI処理だけではなく、OM-1系センサの位相差情報も使うとすれば、かなり高精度になるかもしれません。
このセンサは全画素クアッドピクセル(2x2OCL)なので出力1画素辺り位相差情報4つを持ってます。OCL(オンチップレンズ)が1つなので4画素ぶんの解像力は無いでしょうけど、アップスケールの足しにはなります。
（ピント追従連射の50fps時は4位相差情報含めて80Mpx相当分を全部読み出してると思われる。)

同様の機能が、キヤノンのDPRAWの解像感アップ機能に使われてるので、アップスケーリングに利用されても不思議ではないと思います。
懸念があるとしたら処理速度と特許でしょうか…。

正直なところ、高画素化したいなら80Mpx/20Mpx切り替え式のクアッドベイヤーにしちゃった方が良いと思いますけどもね。
OCLをクアッドベイヤ用に載せ替えて、全画素位相差は捨ててOM-5と同程度の像面位相差にする。高感度または高速撮影には20M、高画素には80M出力を切り替えればいい。(多分80Mそのままでの画像出力だと品質が不足するだろうから適切に縮小する。)
OM-1系センサと言われてるIMX472にはHDRモードもあるのでダイナミックレンジに特化した出力も多分できる。

ただ、記事本文で言われてる鳥撮影には向かないし、風景ならハイレゾが更に良くなれば済みそうではあります。
ペンタのリアレゾのように、ベイヤー配列をキャンセルするだけでも解像感と色は確実に良くなるので、ハイレゾをもっと軽くしたり動体除去するなどの方向で頑張って欲しいかも。

どこまでが許容される工夫でどこまでが許容されないフェイクか、AIが浸透するにつれて境界が曖昧になっていますね。
すでにノイズ除去技術もAI利用が当たり前ですが、あれだって厳密には想像で補っているとも言えますし。
私はAIアップスケーリングはアリだと思いますが、これを進めると「過去の鳥の画像から想像して羽のディテールを描き出す」になっていくわけで、それはさすがにどうなのかなと…

境界は曖昧ですが、今後その境界はAI利用側に少しずつ押し広げられるのは既定路線なのかなと思いました。

2000万画素ならなんとか使える画素数でしょうが、問題はトリミング耐性でしょう。
Z9(4500万画素)とZ50II(2000万画素)で鳥撮りをしてますが、動き回る鳥ゆえに鳥を中央に撮影し後からトリミングで構図を整えることが多く、写真展の作品作りにはZ50IIの低画素機は使い辛いです。
AIアップスケーリングに頼るのならカメラ内じゃなくてパソコンでの編集段階でやって欲しいですね。

出力ピクセル数を増すアップスケーリングは要りませんが、PureRAWを常用している身としては、ピクセル数そのままで解像感だけをビシッとマシマシしてくれ、更に高感度ノイズが2段ちょい改善するPureRAWの処理がリアルタイムで入るなら、それは是非とも欲しいですね。
ただし、必ずOffにもできるようにしてもらうことが前提ですが。

線が太くなったり、のっぺりした平坦な印象に仕上がるようならoffにする機能は欲しいです。

野鳥写真家屋や昆虫写真家屋が高画素がほしいのは、トリミング前提での撮影だからですよね。
ただ、150mmで撮りアップスケーリングしてからそれをトリミングして500mmレンズで撮ったような写真にすることが可能という話であれば、
それは嫌悪する方もいるでしょうね。
それなら、150-600mmのレンズをもっと安くする方がもっと支持を得られる気はするのですが…。

コンピュテーショナル・フォトグラフィーによる多くの優れた機能の搭載は他社への大きなアドバンテージと思いますが、
AF性能や高感度画質など基本性能の向上やハードウェアの性能を使い切るファームウェアの更新にもっと注力してもらいたいです。

どのセンサーフォーマットも高画素化の要望がすごく多いと聞きますが、アップスケーリングはちょっと違う気はします。ただAIの進化で高画素化と同等の写真になる時代が来るのかもしれませんし、結果を伴ってさえいればいいとは思います。

センサーを高画素化したくてもレンズ側の解像性能の問題があるので、単にスペック上の高画素化よりもこういう流れの方がむしろ誠意を感じます

OMはオリンパス時代から一貫してセンサーの更新に消極的な姿勢を取ってきました。AIの活用が、現在使用している2種類の20MPセンサーを更新せず長期間使い続けたいという目的に過ぎないのであれば、それは到底歓迎できるものではありません。

「トレードオフ」と表現されていますが、彼らのセンサーはすでにレンズ交換式カメラ用の積層型センサーの中で最も遅い部類に入ります。もともと80MPであるために理解できるという主張もありますが、最終的な出力は20MPのRAW、しかも12bitに過ぎません。40〜50MPで14bit RAWを出力する他社製品に比べて、約2倍遅い読み出し速度を正当化する根拠にはなり得ません。

MFTのセンサーではG9Ⅱの2500万画素が限界でしょう。
これはフルサイズの9600万画素、APS-Cの4000万画素に相当する。
OM-1の2000万画素はフルサイズの8000万画素に相当するので
これ以上は現状のセンサーでは無理があると思います。
それならばアップスケーリング等の飛び道具を使うのもありだと思う。

いろいろなコンピュテーショナルフォトグラフィーを
期待しています。これがMFTが生き残る道でもあるでしょう。
これがあるからこそ私はMFTを選んでいるのだから。
FFにはFFの良さ、APS-Cにはその良さがあります。
私はその3つとも持っていますがMFTにはMFTの良さがあります。
FFと同じに考えることは無理があります。
OM-1の積層センサーにも十分満足しています。
この価格で積層が手に入るんですからね。

今でも十分ですが、アップスケーリングの選択肢が増えるのであれば歓迎です。

仕上がり次第ですが、最近の現像ソフトならAIノイズ除去と合わせてアップスケーリングできるのもありますし、そもそもベイヤー配列のものをカメラ内で現像している訳なので方向性としてはアリだと思います。

アップスケーリング処理に時間がかかるなら私は要りません。
それよりOMDSに望むのはAF精度です。撮影をしていて、ピントが来ていない写真はさらに低解像度が目立ってしまいます。
コンピューテーショナルフォト望むのはボケです。F4ズームでもフルサイズ換算で、F2のボケがあってAF精度の高く軽量なマイクロフォーサーズにまた戻ります。

映像素子からの情報を人間が認識できる画像にする時点でさまざまな処理がされているわけです。AIによる画像処理をそれに加えても全く問題ありません。結果良ければ全てよしです。写真という言葉がよくありません。光画なのですから。

今まで通り2000万画素画像情報に加えて、AI超解像処理のための追加情報をrawファイル内に記録して、その後カメラ内かPCで改めて高解像度処理をするってことなんでしょうか？それとも、カメラ内で8000万画素に変換したデータをrawファイルとして記録するんでしょうか？
さすがに後者の8000万画素でrawを作るのは期待したくないなぁ。rawとは思えませんから。

センサーを高画素にしても各レンズを更新する余裕が無さそうに見えるのでこういう手段に傾いてるんだろうと予想してます。

再度のコメント失礼します。

＞OM-1シリーズでは、バードフォトグラフィーにおけるナンバーワンのカメラブランドを目指している。

MFTでも超望遠レンズは大きく重くなりますし、フルサイズ機のボディも小型・軽量化されてきている現状では、鳥撮影に限って言えば換算焦点距離しかアピールポイントがないように思えます。

クロップした際の解像感はフォーマットサイズ由来で致し方ないと思いますが、AF性能も被写体認識も他社に遅れをとっている中で、AIアップスケーリングは苦肉の策？か、あるいは次善の策？か気になるところです。

高画素化についてはAIで頑張っても、結局センサーサイズの大きさがキモですから無駄なチャレンジ、とは言いませんが、OMについては他に頑張る分野があるのではないかと。
例えば何時まで経っても他社に追いつけないC-AFとか、小さいセンサーサイズの利点となるであろう読み出し速度とか、私はもう諦めてますが、基本的な部分を持ち上げたほうが良いと思いますね。あとはユーザーを引き留めるような魅了的な新製品ですか。あまり変化のないmk2商法はもう十分かなと。

コンピュテーショナル・フォトグラフィーによる「ライブGND」搭載はハマったなと思いましたが、OM-5 MarkⅡボディに積めなかったのは、上位機種との差別化の為とはいえ、残念でOMDS飛翔の絶好のチャンスを失ったような、、、風景散歩に強力な手ぶれ補正とこのライブGNDで他社より一歩も二歩も先を行けたのに残念。

構図をある程度じっくり検討できる風景や、相手が動かない（虫は動きますが）マクロ撮影では、トリミングはそこまで必要ないので、このままでいいわけですよね。
場合によってはハイレゾショットも使えますし。

どなたか既に書いていらっしゃいますが、野鳥で高解像度が求められるのは、動く被写体を追うのに必死で、構図まできちんと決めずにトリミング前提でバシャバシャ撮って、その中から選んで加工、という人が多いのだろうなと。

だからといって、AIでこの解像度がなんとかなるのかといえば、トリミングを前提にするならそりゃ無理なんじゃないですかね・・・。
AIで塗り絵したものを拡大したら、粗が目立つようになるだけじゃないかな、と想像します。そうならないやり方もあるかもしれませんけど。

けどそもそも論で、「バードフォトグラフィーにおけるナンバーワン」とか言いたいなら（こんなことを考えていたことにビックリしましたが）、「解像感の高い超望遠単焦点」のラインナップを揃えてから言うべきと思いました。
世界では、150mm（換算300mm）もあれば野鳥が撮れてしまう地域もありますけど、日本では400mm（換算800mm）が必須。
センサーも勿論大事ですけど、レンズがないと高解像度のセンサー作っても活かせないんですから、そういうことを標榜するなら、基礎体力（レンズラインナップ）も改めて見直していただきたいなと。。。

AI処理は当たり前になりつつあり、今後はさらに進んでいく技術なのかもしれませんが、「第三者が、ここはこうなっているはず、と言って勝手に改変してしまった画像」だと思うと、たとえ綺麗に撮れていてもシラケてしまう気がします。

だったらもう初めからCGでよくない？などと思ってしまうのは私が古い人間だからでしょうか。
すでに多くの面で活用されているとはいえ、そっち方向に行きすぎた機械は積極的には使わないだろうと思いました。

モノクロ天体カメラではクアッドピクセル全部を使って画素数を４倍にしています。ちゃんと解像度が上がった画になっているようです。F値が大きく焦点距離が長く、射出瞳位置が撮像素子から遠いからできる？のかも知れません。
カラー天体カメラでは特殊なDebayer処理が必要で、実用化されていないとの事です。

広角ズームでは射出瞳位置が撮像素子にとても近く、ズーム量で位置が変わると思います（バリフォーカル）。自社の限られた対応レンズであれば、特殊なDebayer処理ができ、AIを入れて不自然さを整えるなどできるのではないでしょうか。

連射枚数、速度が減っても、ベースISO感度が１００とかに下がっても良いので挑戦して欲しいです。