Qualcommとソニーの協業で変わるスマホのカメラ体験 Snapdragon 8 Gen 2で実現したこと:石野純也のMobile Eye(2/3 ページ)
Qualcommのスマートフォン向けフラグシッププロセッサ「Snapdragon 8 Gen 2」では、AIの強化に加え、カメラの制御を担うISPも大きく進化させた。その一端を担うのが、センサーを開発するソニーセミコンダクタソリューションズだ。特にAIを用いたカメラ性能が向上しているという。
スムーズと省電力を両立させたズーム、ジョイントラボの狙いは?
また、マルチカメラを活用したズーム処理も、Snapdragonとより深く連携することで、スムーズさを維持したまま消費電力を抑えられるようになるという。スマートフォンは、焦点距離の異なる複数のカメラを搭載し、それらを切り替え、疑似的にズームを行うのが一般的だ。ただ、カメラそのものを切り替えているため、その際に露出やカラーバランス、フォーカスなどが変わってしまう。
これを防ぎ、シームレスなズームを行うには、あらかじめユーザーが使うであろう別のカメラをバックグラウンドで起動させておく必要がある。とはいえ、それだと3つのカメラがフルで動いてしまうため、単純計算でバッテリーの消費量も3倍に増えてしまう。搭載できるバッテリー容量に限界のあるスマートフォンでは、省電力性能も重視されるポイントの1つだ。
このトレードオフを解決するため、ソニーが取った方法が、使っていないカメラのフレームレートを3fpsまで落とし、露出合わせなど最低限の処理だけを維持するというもの。切り替え時には即座に30fpsまで上がり、普段通り、カメラとして利用できる。カメラ切り替えのスムーズさと省電力性能を両立させた技術といえる。これも、ジョイントラボの成果だ。
ソニーがQualcommとジョイントラボを設立したのは、センサーとプロセッサの役割分担を、細かくすり合わせていくところにあったという。御厨氏は、次のように語る。
「今回のQuad Digital Overlap HDRもそうだが、裏面センサーができることとISPがやった方がいいことをうまく組み合わせていかなければならないときには、われわれだけでは機能実現できない。Snapdragon側がこういう振る舞いをしてくれるとありがたいということがあり、そういったすり合わせを行いながら、現場のエンジニアを動かして動作検証もしている」
Quad Digital Overlap HDRは、ソニー側からの提案。「こういうことがユーザーのメリットになると提案し、Qualcomm側からもそれがいいとなった」(同)という。御厨氏によると、スピード感を出しながら新しい機能の開発に取り組めるのが、ジョイントラボを設立したメリットだという。
また、センサー側にもメモリやロジック回路が入るようになり、「センサーにより近いところで何をして、プロセッサとどう役割分担すべきなのかは考えなければいけない」。ジョイントラボのような形で連携を取っておくことで、それをセンサーの開発にもフィードバックできる。
関連記事
- Qualcomm、AI強化のハイエンドSoC「Snapdragon 8 Gen 2」発表 2022年内に対応スマホ登場
Qualcommがモバイル向けの最新プロセッサ「Snapdragon 8 Gen 2」を発表した。主にAI機能やネットワーク通信機能が強化されているのが特徴で、同SoCを搭載した最初の製品は2022年内に登場する見込みだ。AI機能を用いてアンテナ間における5G通信を最適化し、上りと下りともにパフォーマンスを向上させる。 - Qualcommがソニーと提携してカメラ機能を強化、Appleなどに対抗する狙いも
Qualcommが、スマートフォン向けの新たな最上位プロセッサ「Snapdragon 8 Gen 1」を発表した。CPUやGPU以上に、カメラやAIといった今のスマートフォンに求められる性能にフォーカスして、性能を向上させた。Qualcommとソニーの提携も発表されたが、その背景には、垂直統合型の開発体制でカメラ機能を強化するAppleなどに対抗する思惑がありそうだ。 - 最新SoC「Snapdragon 8 Gen 1」では何が変わるのか? カメラからセキュリティまでを解説
Qualcommが発表した新プロセッサ「Snapdragon 8 Gen 1」は、下り最大10Gbps、上り最大3.5Gpbsの高速通信が可能になる。カメラの画像処理性能も強化され、明暗の激しい場所や暗所などよりキレイに撮影できるようになった。カメラが常時オンになることで、セキュリティレベルも向上した。 - スマホカメラが進化した裏側で起きていること ソニーのイメージセンサー開発部隊に聞く
すごく暗い場所でもAFが効くようになったり、気がついたらダイナミックレンジが広くなったりと、ここ数年のスマホカメラはスペックで語られない基本性能が上がっている。そこでセンサーメーカーであるソニーセミコンダクタソリューションズに話を聞きにいった。 - デジタルカメラをも駆逐 スマホのカメラが大幅な進化を遂げた理由
今回はスマホに搭載されるカメラの進化についてまとめてみる。多眼化した機種が普及し始めた2017年から進化が始まり、2022年ではイメージセンサーの大型化や画素数の増加など、めざましい進化を遂げている。
Copyright © ITmedia, Inc. All Rights Reserved.