Appleは「コンテンツイベントマッピング」に関する特許（特許番号：US 11647260 B2）を取得しました。これは、噂されている「RealityPro」ヘッドセットで「没入型」合成現実体験を生み出すためのものです。
特許について
設定とは、個人が感知したり、電子システムを介して相互作用したりすることができる、コンピュータによって完全にまたは部分的に作成された設定を指します。SRでは、個人の動きのサブセットが監視され、それに応じて、SR設定内の1つ以上の仮想オブジェクトの1つ以上の属性が、1つ以上の物理法則に従って変化します。
例えば、SRシステムは、数歩前進する人物を検知し、それに応じて、現実世界の風景や音の変化と同様に、その人物に提示されるグラフィックや音声を調整します。また、SR環境における仮想オブジェクトの属性の変更も、動きの表現（例えば、音声指示）に応じて行うことができます。
個人は、触覚、嗅覚、視覚、味覚、聴覚など、いずれかの感覚を用いてSRオブジェクトとインタラクトしたり、SRオブジェクトを感知したりすることができます。例えば、個人は、多次元（例えば三次元）または空間的な聴覚環境を作り出す、あるいは聴覚の透明性を実現する聴覚オブジェクトとインタラクトしたり、SRオブジェクトを感知したりすることができます。
Appleは特許出願において、多次元的または空間的な聴覚設定は、多次元空間における個別の音源の知覚を個人に提供すると述べています。聴覚の透明性は、コンピュータで生成された音声の有無にかかわらず、物理的な環境からの音を選択的に取り込みます。一部のSR設定では、個人は聴覚的なオブジェクトのみと相互作用したり、知覚したりすることがあります。
SRの一例は、仮想現実（VR）です。VR設定とは、少なくとも1つの感覚に対してコンピュータによって生成された感覚入力のみを含むように設計されたシミュレートされた設定を指します。VR設定には、個人が相互作用したり、感知したりできる複数の仮想オブジェクトが含まれます。個人は、コンピュータによって作成された設定内での個人の行動のサブセットのシミュレーション、および／またはコンピュータによって作成された設定内での個人またはその存在のシミュレーションを通じて、VR設定内の仮想オブジェクトと相互作用したり、感知したりすることができます。
SRのもう一つの例は、複合現実（MR）です。MR環境とは、コンピュータで生成された感覚入力（例：仮想オブジェクト）と、物理的な環境またはその表現からの感覚入力を統合するように設計されたシミュレーション環境を指します。現実のスペクトルにおいて、複合現実環境は、一方の端にあるVR環境と、もう一方の端にある完全に物理的な環境の中間に位置し、その両方を含みません。
一部のMR環境では、コンピュータによって生成された感覚入力が、実際の環境からの感覚入力の変化に適応する場合があります。また、MR環境を提示する電子システムの中には、実際の環境に対する向きや位置を監視し、仮想オブジェクトと現実オブジェクト（実際の環境の物理的な要素またはその表現）とのインタラクションを可能にするものもあります。例えば、システムは動きを監視し、仮想植物が実際の建物に対して静止しているように見えるようにする場合があります。
複合現実の一例としては、拡張現実（AR）が挙げられます。AR設定とは、少なくとも1つの仮想オブジェクトが物理的な設定、またはその表現に重ねて表示される、シミュレートされた設定を指します。例えば、電子システムは、不透明なディスプレイと、物理的な設定の表現である画像または動画を撮影するための少なくとも1つの撮像センサーを備えている場合があります。
このシステムは、画像またはビデオと仮想オブジェクトを合成し、その合成物を不透明ディスプレイに表示します。システムを使用する人は、物理的な環境の画像またはビデオを介して間接的に物理的な環境を観察し、その上に仮想オブジェクトが重ねて表示されるのを観察します。システムが画像センサーを用いて物理的な環境の画像を撮影し、それらの画像を用いて不透明ディスプレイにAR環境を表示する場合、表示される画像はビデオパススルーと呼ばれます。
あるいは、AR環境を表示する電子システムは、透明または半透明のディスプレイを備え、ユーザーはそれを通して物理的な環境を直接観察することができる。システムは、透明または半透明のディスプレイ上に仮想オブジェクトを表示し、ユーザーはシステムを使用して、物理的な環境に重ねて仮想オブジェクトを観察することができる。
別の例として、システムは、仮想オブジェクトを物理的な環境に投影する投影システムを備えることができる。仮想オブジェクトは、例えば物理的な表面やホログラムとして投影され、システムを使用する個人は、仮想オブジェクトが物理的な環境に重ねて表示されるのを観察することができる。
拡張現実設定とは、コンピュータによって生成された感覚情報によって物理的な設定の表現が変化する、シミュレートされた設定を指す場合もあります。例えば、物理的な設定の表現の一部がグラフィック的に変更（例えば、拡大）される場合があり、変更された部分は元の撮影画像を反映しているものの、忠実に再現されたものではない可能性があります。
複合現実のもう一つの例は、拡張仮想世界（AV）です。AV環境とは、コンピュータで作成された仮想環境、または仮想環境に、物理的な環境からの少なくとも1つの感覚入力を組み込んだシミュレートされた環境を指します。物理的な環境からの感覚入力は、物理的な環境の少なくとも1つの特性を表す場合があります。例えば、仮想オブジェクトは、画像センサーによって捉えられた物理的な要素の色を呈する場合があります。
別の例として、仮想オブジェクトは、画像、気象関連センサー、および／またはオンライン気象データによって特定された、物理的な環境における実際の気象条件と一致する特性を示す場合があります。さらに別の例として、拡張現実の森には仮想の木々や構造物が存在するものの、動物は実際の動物を撮影した画像から正確に再現された特徴を持つ場合があります。
多くの電子システムは、個人が様々なSR環境とインタラクトしたり、それを感知したりすることを可能にします。一例として、ヘッドマウントシステムが挙げられます。AppleのRealityProのようなヘッドマウントシステムは、不透明なディスプレイとスピーカーを備えている場合があります。あるいは、外部ディスプレイ（例：スマートフォン）を接続できるように設計されたヘッドマウントシステムもあります。ヘッドマウントシステムは、物理的な環境の画像／動画を撮影したり、音声をキャプチャしたりするためのイメージングセンサーやマイクを備えている場合があります。
ヘッドマウントシステムは、透明または半透明のディスプレイを備える場合もあります。透明または半透明のディスプレイには、画像を表す光を人の目に照射する基板が組み込まれている場合があります。ディスプレイには、LED、OLED、デジタル光プロジェクター、レーザー走査光源、シリコン基板上液晶、またはこれらの技術を組み合わせたものが採用される場合があります。
Reality Proについて
RealityProに関しては、噂が飛び交っています。今年、あるいは2024年、あるいは2025年、あるいは2026年に登場するでしょう。ヘッドマウントディスプレイになるかもしれませんし、「普通の」メガネのようなデザインになるかもしれません。あるいは、最終的には両方で提供されるかもしれません。Reality Proは、動作するためにiPhoneに接続する必要が生じるかどうかは不明です。他の噂では、Apple製のカスタムチップと、「リアリティ・オペレーティングシステム（ROS）」と呼ばれる専用オペレーティングシステムが搭載される可能性もあると言われています。あるいは、「拡張現実オペレーティングシステム（XROS）」と呼ばれるかもしれません。
この記事はAppleWorld.Todayの許可を得て掲載しています。
