このスマートフォンのカメラセンサーは、ぼやけた写真を過去のものにするかもしれない

パリに拠点を置くPropheseeは昨年、スマートフォンカメラ向けに自社製のイベントベースセンサー「Metavision」技術を発表し、大きな話題を呼びました。このスタックの根底にあるアイデアは、ぼやけた画像を過去のものにすることであり、開発段階では目覚ましい成果を示しました。

MWC 2024において、同社はQualcommとの提携により、新たな大きな進歩を達成しました。ニューロモルフィック・ビジョン・システムの分野で真摯な取り組みを行っている同社は、Metavisionセンサー技術が生産段階に到達したことを発表しました。

PropheseeはDigital Trendsに対し、ソニーと共同で、カスタムソフトウェアチューニングとQualcommの最上位チップセットSnapdragon 8 Gen 3のパワーを活用したセンサーを開発したと発表しました。Metavisionセンサーは、画像センサーと連携してマイクロ秒単位の速度で視覚データのギャップを埋め、真っ暗な環境から非常に明るい環境まで、ブレのない画像撮影を可能にします。

「Propheseeの特許取得済みMetaVisionセンサーとAIは、人間の目と脳の働きを模倣しています」と同社は述べています。MetaVisionセンサー技術のイベントベースアプローチは、モーションブラーキャンセル機能を搭載し、最終結果に動きによるぼやけが一切現れないようにします。

Propheseeがぼやけた写真を排除しようとしている方法

ほとんどのスマートフォンカメラは、最高級のフラッグシップモデルでさえ、高速で動く被写体を捉えるのが難しく、適切なフォーカスロックを維持できません。その結果、画像は場違いに見えるだけでなく、モーションアーティファクトによってほとんど使い物にならなくなってしまいます。

モーションブラーは、特に光量が少ない状況や夜間など、マルチフレームノイズ低減などのソリューションが本来の性能を発揮できない状況で顕著になります。Propheseeは、「動きの速いシーンや低照度シーン」において「前例のないレベル」の画質を実現すると主張しています。

一般的なスマートフォンのカメラセンサーは、露光時間に応じて光量が変化するのに対し、Metavisionのセンサーは「永久露光時間」を実現し、動きを連続的に捉えます。「まるで毎秒1万枚の画像を撮影できるカメラがスマートフォンに搭載されているようなものです」と同社は謳っています。

Propheseeは、ソニーと共同開発したカスタムセンサーの提供に加え、ソフトウェアスタックとそれに付随する統合サービスにも力を入れています。「Metavision Deblurソフトウェアは現在、生産段階に入っています。ハードウェアとソフトウェアの両方を携帯電話に統合しています」と、同社はDigital Trendsに語っています。

スマートフォン業界のプレーヤーにシームレスな体験を提供し、Metavisionのハードウェアとソフトウェアキット全体をそれぞれのSnapdragon搭載デバイスに導入できるようにするのが狙いです。注目すべきは、その強力な処理能力、高度なISP、そして次世代AI機能により、フラッグシップのSnapdragon 8 Gen 3チップがベースラインに設定されている点です。

スマートフォンカメラのエキサイティングな未来

Propheseeのソリューションは、ソニーのIMX636モバイルカメラセンサー上で完全に機能する状態です。現在、この技術はスマートフォンのメインカメラでのみテストされています。しかし、同社はDigital Trendsに対し、Metavisionセンサーの将来のバージョンでは、超広角や望遠タイプのセンサーを含む複数のセンサーのサポートを検討していると語っています。

現状では、Propheseeのイベントベースセンサーは、ブレのない静止画を生成することしかできません。しかし、同社は将来的に動画のサポートも計画していると発表しています。

「これは主にビデオセンシングプラットフォームであり、様々なユースケースで動きを捉え、処理するために使用されます」と、Propheseeの広報担当者はDigital Trendsに語った。同社は、市販のスマートフォンにMetavisionセンサーが搭載される具体的な時期については明言しなかった。明るい材料としては、Qualcomm Snapdragon 8 Gen 3を搭載したスマートフォンが既に市場に出回っており、Metavisionのポートフォリオもすでに量産準備段階にあるため、それほど長く待つ必要はないだろう。

Propheseeがこれまでデモで披露してきた内容から判断すると、Metavisionセンサーがこれらの期待に応えれば、スマートフォン写真に全く新しい時代が到来するかもしれません。一般ユーザーは、ブレのない写真を撮るためにシャッタースピードなどのパラメータを調整する煩わしさから解放されるでしょう。それは、想像するだけでも非常にエキサイティングな未来です。