Apple、AR、そして2017年のiPhoneラインナップ

次世代の iPhone（iPhone 8、iPhone 8 Plus、iPhone X）には、より優れたディスプレイ、洗練されたデザイン、高強度ガラスや外科用グレードのスチールなどの高級素材など、通常の反復的な改良が採用されていますが、さらに重要なのは、Apple が AR で何をしようとしているのかを、ようやく垣間見ることができたことです。

AppleはまだVR革命に参加していない（おそらく永遠に参加しないだろうが）が、最近、既存のiOSデバイスでAR体験を可能にするARKitと呼ばれるソフトウェア開発キットを発表し、拡張現実（AR）市場に参入した。新型iPhoneでは、高度なAR体験のワークロードに対応するために設計された新しいA11 Bionic SoCのおかげで、AR体験はさらに強化されるはずだ。Appleはまた、新型iPhoneシリーズ向けにARKitソフトウェアを最適化したと発表している。

AppleのA11チップには、2つの高性能コアと4つの高効率コアを備えた6コアCPU、3コアのグラフィックプロセッサ、統合型ISP（画像信号プロセッサ）が搭載されている。Appleによると、CPUはワールドトラッキングデータを処理し、GPUは60fpsで高解像度のグラフィックを提供するという。AppleはISPを使用してリアルタイムの照明推定を実行し、デジタルコンテンツを現実世界の照明に溶け込ませている。これは、 QualcommがSnapdragon 835で採用したアプローチと似ている。つまり、優れた機能をすべてSoCに組み込み、ISPを活用するというもので、ビジョンプロセッサや、Tangoフォンの場合は別のカメラ/センサーアセンブリに頼るわけではない。

一般的に、Appleは、A11 Bionicチップは、前世代のiPhoneのA10 SoCと比較して、「マルチスレッドワークロードで70％優れたパフォーマンス」と「30％高速なグラフィックパフォーマンス」を提供すると主張しました。  

次期iPhoneシリーズには、新しいジャイロスコープと加速度計が搭載され、前世代のiPhoneよりも正確な動きと向きの調整が可能になります。さらにAppleは、新型iPhoneは工場出荷時にカメラがAR向けに調整されているため「ARのパフォーマンスに大きな違い」をもたらすと述べていますが、具体的なプロセスについては説明していません。

Appleは、没入型メディアへの対応を強化するため、iPhoneのオーディオシステムも改良しました。新型iPhoneはステレオスピーカーを上下に1つずつ搭載し、空間オーディオにも対応しています。これにより、拡張現実（AR）体験におけるサウンドは、環境内でのユーザーの位置や、音源に対するユーザーの向きに応じて変化します。空間オーディオアルゴリズムは、固体による音の遮蔽も考慮します。

Appleの新しいiPhoneラインナップには、機能が異なる3つのモデルがあります。iPhone 8は4.7インチのRetinaディスプレイと12MPのシングルリアカメラを搭載しています。より大型のiPhone 8 Plusは、5.5インチのRetinaディスプレイと、広角レンズと望遠レンズを搭載したデュアル12MPリアカメラを搭載しています。iPhone Xは、12MPのデュアルリアカメラを搭載しています。また、2436 x 1125ピクセル（458ppi）の解像度とHDRカラーに対応した5.8インチOLED「Super Retinaディスプレイ」を搭載しています。3機種とも光学式手ぶれ補正機能を搭載しています。

AppleはデュアルカメラシステムがAR技術にどのようなメリットをもたらすのか説明していませんが、奥行き認識と物体追跡性能の向上は確実です。デュアルカメラシステムにより、新型iPhoneは写真や動画撮影時に被写体と背景を分離し、高度な照明機能を実現できます。iPhone 8 PlusとiPhone Xに搭載されているデュアルカメラシステムは、ARアプリにおいても優れた追跡精度と奥行き認識を実現すると予想されます。

iPhone Xは、一目見るだけで電話にログインできるTrueDepthと呼ばれる顔認識技術も提供しています。前面のTrueDepthカメラシステムには、標準の前面カメラ、暗い場所用の投光イルミネーター、顔に30,000個の目に見えないドットを照射するドットプロジェクター、ドットを検出する赤外線カメラが含まれています。TrueDepthカメラが収集するデータは、デバイス上の「セキュアエンクレーブ」に保存される顔の数学的モデルの構築に役立ちます。Appleは、「顔データ」をサーバーに保存しないと説明しました。A11 Bionicチップには、リアルタイムの顔識別を可能にするために1秒間に最大6000億回の機械学習計算を実行するデュアルコアニューラルエンジンも含まれています。

同じ技術は、顔の表情を仮想世界に取り込むのにも活用できます。Appleは「Animojis」という機能を開発し、実際の表情を絵文字アイコンに表示できるようになりました。Appleはこの表情トラッキング技術を他のAR体験に活用できるとは明言していませんが、将来的にはゲームやアプリでこの技術のバリエーションが見られるようになると予想されます。また、視線トラッキング技術がAppleのデバイスに搭載されることも期待されます。

Appleは、新型iPhoneの機能を活用したARアプリを今月中にいくつかリリースすると発表した。その中には、テーブルトップ型のAR戦略ゲーム「The Machines」も含まれており、平らな面を戦場に変えてプレイできる。Appleはまた、MLBが開発中のアプリもデモした。このアプリは、観客がフィールド上の選手の統計情報やその他の関連情報を確認できる。また、「Skyguide」というアプリでは、星空図が表示され、上空に見える天体についてより詳しく知ることができる。

画像

1

の

4

Appleのプレゼンテーションで特に目立ったのは、新型iPhoneと連携させてAR機能をより活用できるスマートグラスやHMD（ヘッドマウントディスプレイ）に関する言及が一切なかったことです。つまり、新型iPhoneは、HMDを装着していないAR対応スマートフォンに共通する問題、つまり視野（つまりスマートフォンのディスプレイ）の大幅な制限と、インターフェース（これもスマートフォンのディスプレイと指先）の使いづらさに悩まされることになります。

Appleは、iPhone 8とiPhone 8 Plusの予約注文受付を9月15日（金）から開始し、翌週から出荷を開始すると発表しました。iPhone Xについてはもう少し先になり、10月27日から予約注文を受け付け、11月3日に出荷予定です。