2つの4Kディスプレイ（片目につき1つ）に2300万ピクセルのピクセルを配置したApple Vision Proは、驚くほど精細なディスプレイを搭載している。これに空間的なバーチャルリアリティ環境を見回す機能を組み合わせると、解像度とディテールへの飽くなき渇望を満たすために必要な、法外な量のピクセルに直面することになる。このような高い要求は、それを満たすカメラを見つけるという問題につながる。キヤノンの担当者は、現在入手可能なカメラにはそれができないと述べている。
最近発表されたインタビューで、PetaPixelのジャロン・シュナイダーは、キヤノンの幹部たちとこれらの課題について議論した。彼らは皆、拡張現実と仮想現実（AR、VR）の重要性を強調しており、また、現在のカメラではこのような要求の厳しいビデオフィードを提供できないと述べている。この主張はおそらく数学的には正しいのだろうが、私の目には物事はそれほど単純でも決定的でもないように映るので、この主張を紐解いてみたい。
アップルビジョンプロのディスプレイは小さな部品のひとつに過ぎない
デュアル・ディスプレイはそれ自体が印象的だが、Apple Vision Proの空間的な性質こそが、ここで本当にレベルを引き上げている。ユーザーが頭を動かすと、新しい視覚情報がツインディスプレイに流れ込む。この情報がデバイスのカメラアレイからのものであれば問題はないが、外部の画像やビデオから発信されたものであれば、そのソースは信じられないほどのディテールをカバーしていなければならない。
忘れてはならないのは、拡張現実やバーチャルリアリティには2次元以上のものがあるということだ。つまり、Apple Vision Pro用の映像を作成する際には、システムのリフレッシュレートだけでなく、映像に近づいたり遠ざかったりすることも考慮しなければならない。これらの技術仕様は、このニッチ分野への進出を目指す意欲的なクリエイターにとって大きな挑戦となる。
現在、どのようなツールがあるのか？
キヤノンは、RF 5.2mm F2.8 L Dual Fisheye 3D VR LensとR5またはR5CカメラでAR/VR専用セットを製造している。このユニークなレンズは、8Kセンサー上に2つのイメージサークルを投影する。単一のセンサーで動作するため、マルチカメラソリューションに関連する同期の問題は回避できるが、生の解像度は妥協する。このシステムはおそらく、十分な結果を得られる最もコンパクトで屋外対応のシステムだろう。
その他のオプションも用意されている。キヤノンの幹部は、Apple Vision Proに必要なベンチマークは14K（または約100メガピクセル）程度だと述べている。このようなカメラを見つけるのは難しいが、かなり近いInsta360 TITANがある。球体のカメラボディに8つのマイクロフォーサーズセンサーが重なり、11Kの360VR映像を撮影する。
これは多くの画素数で、多くのデータを生成する。TITANは9枚のメモリーカードを使用する。8枚は8つの異なるカメラに割り当てられ、9枚目は追加の同期情報、ジャイロスコープによる動きの統計情報などを収集する。ここでもう一つの課題、データスループットに遭遇する。
極端な選択肢
意志があれば方法があり、誰もがこの新技術の一部を望んでいる。かなり極端なソリューションとして思い浮かぶのは、スフィアの18Kビッグスカイカメラだ。このソリューションが完璧に聞こえるかもしれないが、これは世界で最も希少なカメラの1つであり、非常に厳しい動作要件がある。他の選択肢としては、カメラアセンブリがある。使用するカメラによっては十分な画質が得られるかもしれないが、操作性がさらに要求され、ビデオ撮影の面でも、このような仕掛けに必要な電気機械仕掛けの面でも、高度な専門知識が必要となる。
ビッグデータ
解像度が高ければ高いほど、データは “大きく “なる。アップルはビジョン・プロに送られてくる映像を最も効率的に圧縮するのは確かだが、このようなデバイスが要求する生の解像度から逃れる方法はない。このようなデジタル情報を制作、編集、共有することは、少なくとも現時点では（そして技術的にも）、困難な作業なのだ。
AIについて触れなければならない。
技術関連の記事には必ずと言っていいほどAIについて触れられているように思えるが、実はここでも大いに関係がある。AIベースのツールは、いくつかのユニークな能力を持っている。SORAやLTX Studioのような大げさな動画生成ツールの話ではない。これらのジェネレーターがタスクに対応する日が来るかもしれないが（明日かもしれないが…）、現時点では、おそらく解決策よりも多くの問題を生み出すだろう。ここでの関連ツールは解像度エンハンサーで、近年かなり効率的になってきており、十分な一貫性と信頼性でプロレベルの結果を提供できるようになってきている。
ピークパフォーマンスはほとんど必要ない
私たちは皆、8Kが大好きではないだろうか？子供（あるいは食料品）の写真やビデオをできるだけ高解像度で撮らないのか？もちろんそんなことはない。ピーク性能はとても素晴らしいものだ。必要な場合もあるが、ほとんどの人はもっと低い設定でほとんどのことをする。おそらくアップル・ビジョン・プロも同じだろう。編集中やEメール送信中にグランドキャニオンに没頭するのはいいことかもしれないが、すべての画像がバーチャルな環境全体をカバーする必要はない。私の見るところ、Apple Vision Proの最大の特徴のひとつは、マルチタスク機能だ。そのため、最近のミュージックビデオやドキュメンタリー、長編映画に完全に没入することはおそらくできないだろうが、今のところ、そしてその先も、これで十分だと私は信じている。没入型AR/VRコンテンツは、メインストリームに完全に没入するまでには、非技術的な大きなハードルを越えなければならない。
空間コンテンツを専門的に作成する
具体的な高解像度の空間コンテンツを作成したい人にとっては、悲しいことに、大きなニュースはない。機材的には、代替となるものは乏しく、かなり高価で、かなりの専門知識を必要とする。残念なことに、アーリーアダプターは割高だが、これらの難題に立ち向かった人は、将来的にユニークな立場に立てるかもしれない。
