Apple Vision Pro チームはどのようにして木星の衛星アマルテアの現実的なバージョンからリモートで作業できるようにしたのか

大好きな映画を見てきましたが、 エンパイア・レコード、およそ1,000回見ましたが、木星の衛星アマルテアの表面から3,000インチのスクリーンでそれを見なければならなかったのは今朝が初めてです。しかし、この機会のために地球から約 4 億 2,000 万マイルを旅する必要はありませんでした。実際、私は M5 プロセッサを搭載した最新バージョンの Apple Vision Pro ヘッドセットを装着して、ニューヨーク行きのアムトラック エンパイア サービスの電車に座っています。

私の天上の映画館の設定は、Apple が環境と呼ぶものです。 Apple Vision Pro ヘッドセットは、内蔵カメラを利用してデジタル要素を複合現実の世界に統合し、視聴者に提供します。私はデスクから離れて作業するときに、MacBook Pro を超えて巨大な仮想モニターを拡張するために定期的に使用しています。環境をミックスに追加すると、着用者の現実世界の視界が、より風光明媚な視界で覆い隠されます。ジョシュア ツリーやヨセミテなどの国立公園から、月のようなさらにエキゾチックな場所まで、選択肢は多岐にわたります。

環境は、発売以来、印象的な没入感を提供してきました。シーン内のオブジェクトを驚くほど間近で詳細に見ることができ、その多くには没入感を高めるためのリアルタイム オーディオ トラックが付属しています。私はヨセミテの眺めとともに吹く心地よい風がとても好きになりました。私は最近、Apple Vision Pro 製品マーケティング担当の井本ゆり氏と、Apple のヒューマン インターフェイス デザイナーのマット デセロ氏と、これらの環境をどのように実現するかについて話す機会を得ました。

木星でのライブ

木星のビューは、他の仮想設定とは異なります。これは Vision Pro の最初のインタラクティブ環境であり、その背後にあるチームは、たとえ視聴者が実際の参照フレームを持たなかったとしても、その体験を可能な限り本物にしたいと考えていました。

リアリティをさらに高めるために、Vision Pro チームはジェット推進研究所 (通常は JPL と呼ばれます) に連絡を取り、木星の月の表面に座ってメールに答えるのが実際にどのようなものかを体験しました。

「私たちはジェット推進研究所のシンシア・フィリップス博士と話をしました。彼女とそこの科学者チームは、私たちが地球や月の組成を理解するのに本当に役立ちました」とマット・デセロは言います。 「そこで、私たちは最初にいくつかのプレビズを持って作業に入り、そこに核を持つ月に似た基本的なテクスチャを追加しました。そして彼らはすぐに、アマルテアには実際には核がないことを指摘しました。それは木星の重力によって集まった岩石の集合体であり、木星の重力によってすべてが引き寄せられ、氷で縛られているのです。」

木星の環境にいると、その氷が足の周りに張り巡らされます。ダイナミックな影がその上を動き、印象的に詳細なテクスチャと形状を描き、詳しく調べることができます。目の前で回転する巨大な惑星から気をそらしてしまうほど、詳細で興味深い内容です。

アマルテアに関するチームの参考資料を考慮すると、現在の詳細はさらに印象的です。 「クレーターの詳細はいくつかありますが、それはこの小さなぼやけた塊に過ぎません。影響を受けていますが、ご存知のとおり、かなり小さいです。そこで、JPL に相談してコンサルティングを依頼し、最終的に全体に粗いテクスチャを作成することになりました」と Dessero 氏は言います。

彼は嘘をついていません。白黒の画像はぼやけたジャガイモに似ています。 「とても小さいです。全長約 160 マイル、直径 90 ～ 100 マイルです」とデッセーロは明言します。 「大局的に考えると、木星、ここでは木星の直径を横切って地球 11 個分が収まることになります。つまり、アマルテアは、全体的に見るとかなり小さいのです。」

参考資料が不足しているにもかかわらず、アマルテアは木星に最適な視点を提供します。惑星が地平線の向こうに大きく浮かび上がるには十分近いですが、重要な詳細が省略されるほど近いわけではありません。大赤斑が見えない場合、木星はどのように見えますか?

「イオからは遠すぎました。アマルテアからはとても気持ちよかったです」とデッセーロは言います。 「そして、私たちはアドラステアを試しましたが、大きすぎるように感じました。大赤斑は見えませんでした。私たちは本当にそれをもっとよく眺めたかったのです。そして、不正行為をしたくありませんでした。本当に衛星のいずれかに滞在したかったのです。単に月を浮かせて動かすだけではありませんでした。そこで、アマルテアが私たちの選択でした。」

回転する木星には深刻なコンピューティング能力が必要です

視点を選択したら、Apple はシーンを真にインタラクティブにする必要がありました。木星は太陽系の他のどの惑星よりも速く自転し、1日は10時間弱です。ただし、Vision Pro ユーザーは時間の経過をカスタマイズして、より速くまたはより遅くすることができます。

ただし、その動きにはすべてコンピューティング能力が必要であり、それを可能にするのは芸術的な表現に加えて、かなりの技術的な課題でした。 「多くのテクスチャをプリベイクしたので、これらすべての動的なシャドウ、サブサーフェス、および発生するアニメーションの計算のみに依存できるようになりました」と Dessero 氏は言います。 M5 が提供する追加のパワーにより、トランジションを簡単に処理できます。

地球に戻る: Apple が地球環境をどのように作り上げているか

Jupiter は現在選択されている環境の中で最も先進的で印象的な環境ですが、私は依然としてより伝統的な設定を定期的に選択しています。地上の設定については、チームはいくつかの賢い技術戦略を使用して現実的な設定をキャプチャし、仮想背景としてより楽しめるように創造的なライセンスを取得しました。

作成プロセスには、360 度カメラによるイメージングと、より包括的な 3D スキャンを実行して風景のメッシュを作成することが含まれます。 「私たちはパノラマを撮影します。これが、より単純な平面に投影できる遠方領域のテクスチャの大部分になります」とデッセロ氏は説明します。 「そして、より近いオブジェクトについては、テクスチャを使用して作成するために、より CG または 3D オブジェクトのアプローチを採用する必要があります。その後、反射、シャドウイング、その他すべてをシェーダーに依存します。」その結果、クローズアップされたオブジェクトは、シーンに非常に具体的なリアリズムを与えます。

GIPHY経由

リアリズムは重要ですが、細部へのこだわりが実際に視聴者を不気味の谷に陥れることがあります。たとえば、月の環境では、地球上で私たちが慣れ親しんでいる大気の霧が存在しないため、スケーリングに関して独特の課題が生じました。通常、「あの物体は遠くにある、そしてとても大きい」と脳に伝える視覚的な指標は、大気が存在しない場合には存在しません。これにより、高さ 7,000 フィートの月の山が 400 フィートの丘のように見える可能性があります。

あなたの目は目の前で起こっていることの正確なスケールを常に認識できるとは限りませんが、Vision Pro によって作成されたデジタル オブジェクトは確かにそれを認識します。山の頂上にある仮想スクリーンで別の映画を見る機会がありました。 「スクリーン」からの光が下の雲ににじみ、驚くほど説得力のある没入効果を生み出します。

私が Dessero と話している間、彼は、Apple チームが環境開発プロセス全体を純粋な芸術要素と技術要素を慎重に組み合わせたものであると考えていることを十分に明らかにしました。環境の複雑な LiDAR グリッドをキャプチャすることで、アーティストは現実的であると同時に理想的な場所のバージョンを作成できます。

改良された Apple Vision Pro を使い始めてから数週間後、Jupiter は私が最もよく使う環境になりました。私は 3 つの設定のうち最も遅い速度に設定し、仕事をしたりコンテンツを見たりしながら、周囲の状況を徐々に変化させます。時々、私はただ座って、自分がマンハッタン博士であるふりをします ウォッチメン そして私は無事に地球を離れ、宇宙の荒れ果てた岩だらけの荒野で一人で暮らすことに成功しました。 Apple がこのすべての詳細を環境に盛り込んだときに、それが念頭にあったのかどうかはわかりませんが、私はそれをうれしく思います。

2025 PopSci 新着情報ベスト

今年の最も重要なイノベーション 50