テスラ オプティマスは現在、2 階を歩きながら 11kg を運びながら充電中です

テスラの 10.10 We, Robot イベントを受けて、同社は本日、新しい Tesla Optimus ビデオをリリースしました。このビデオはわずか 1 分 24 秒ですが、人型ロボットに関する多くの新しい進歩が詰め込まれています。

先週、テスラはWe, Robotイベントで20台以上のロボットを群衆の中を歩き回り、ドリンクを提供したり、踊ったりしていた。当時私たちはオプティマスの最新作を見たと思った。 Teslabot からの声を初めて聞いたとき、Tesla が Grok 統合の初期ビルドを披露しているのだと思いました。

2 番目と 3 番目のビデオを、異なる非常に人間的な声で再生したところ、これが音声インタラクションを提供している遠隔操作者であることは明らかでした。これには多くの人が失望しましたが、テスラが会話型 AI 音声モデルの進歩ではなく、イベントでハードウェアを展示していたことは明らかでした。

テスラは、22 の自由度を示し、人間の能力に近い機能を提供する新しい手をこのイベントにもたらしました。

今日のビデオは、オプティマス ロボットのソフトウェア面におけるテスラの進歩についてさらに詳しく示しています。

スムースウォーカー

ビデオは、TeslaBot が自信を持って歩いているところから始まります。このセクションは 1 倍速で、速度は少し増加しているように見えますが、おそらく初期仕様の 5MPH よりも低いと思われます。足は靴で覆われているように見え、膝蓋骨は洗練されているように見え、全体的にロボットはより洗練されているように見えます。おそらく v2.5 のプロトタイプです。

次のショットは 2 倍の速度にスピードアップされますが、これは重要な部分ではありません。右下の地図と、Teslabot がコンピューター上で実行されているニューラル ネットワークを使用して人や障害物を自動的に回避できるようになったという詳細です (同じもの)テスラ車の HW4 コンピューター)。

Tesla のシニア ソフトウェア エンジニア @ Tesla Autopilot である Jack Han が「別のニューラル ネットワークをトレーニングしました」と再投稿しました。

ご存知のとおり、テスラは何年にもわたって自動車用のニューラル ネットをトレーニングしており、最近それをエンドツーエンドのモデルに統合し、人間が車の周囲の世界をどのように認識し、環境内の安全なルートを計画するかを再現しようとしました。

Han 氏の投稿によると、Teslabot は現在、車とはまったく異なるモデルを実行しているようです。ビデオでさらに詳しくわかるように、Teslabot が Y 軸に関する課題に取り組むことが多いことを考えると、これは当然のことです。

人を検知して回避できることは、人間と同じ物理空間に住むことができるための重要な特性です。障害物を回避できれば、Teslabot が落下することなくタスクを完了できるようになります。

右下隅の地図は、Optimus による経路計画を示しており、生産ラインの隣にある人やハードウェアのパレットの間を方向転換したり歩いたりすることができます。

世界を見る

ビデオの次のセクションでは、Optimus のヘッドマウント カメラからのビデオが表示されます。このビューには、オブジェクトのエッジを識別する緑色の点が表示されています。これは、奥行き認識にも使用される可能性があります。

私にとって印象的なのは視野です。これは車のリアビューカメラを思い出させます。これは、垂直方向と水平方向の優れた視認性を提供する大きな魚眼レンズです。 Teslabot が床を認識できることが重要です。これは、数歩で到達する表面であるためです。屋根は、屋内ドアと屋外ドアの違いを知るために、ドアの上の非常口標識などの重要なコンテキストも提供する場合があります。

複数のボットが Photosynth 点群を作成

Tesla は、当時の Microsoft の Photosynth と同様の、完全に画像から構築された 3D 点群を示しています。このマップの特別な点は、複数の Teslabot から作成されていることです。

すべての展開に複数の Teslabot が含まれるわけではないため、Tesla がこれに依存しないことが重要ですが、複数の接続されたボットがある場合、人間には利用できない機能である、実際に角の周りを確認する機能があります。

この 3D マップはナビゲーションに使用でき、ボット所有者がロボットにタスクを発行するためのインターフェイスをぜひ見てみたいと考えています。送信元と送信先を定義すれば、ロボットが環境内でその経路を見つけるのは間違いないと思います。

テスラボットの充電

テスラがロボットに充電させる計画を初めて知りました。そして嬉しいことに、ロボットは自動的に充電できるようになるのです。人型ロボットの発表以来、最初に疑問に思ったことの 1 つは、どうやって充電するのかということです。

多くの人は、テスラは足元でワイヤレス充電を使用し、ロボット掃除機のように、充電式歯ブラシと同じように、単純にベースに戻ってその上に立つのではないかと推測していました。

今日のビデオから、テスラは、上部に充電タブを提供する、長くて薄いデザインのウォールチャージャーのバリエーションを自社の車に使用していることがわかります。ロボットは単純に歩いて近づいて、充電器を肩の後ろに差し込みます（マトリックスのように後頭部に差し込むのに非常に近いです）。

本文では、これが背面カメラのみを使用して行われることを示唆していますが、これもまた印象的な偉業です。

私たちが初めて見たのは、オプティマスの頭の端の周りにある赤いライトです。通常は親しみやすい白ですが、これはバッテリーステータスインジケーターとして機能し、ボットの充電が必要な場合に赤に変わるようです。

ロボットが充電セッションから現れると、LED ストリップが白色に戻りました。

腕の日をスキップしないでください

Teslabot が 4680 バッテリーの 5×6 ケースをピックアップしているのがわかります。各セルを傾けると、約 355 グラム/セル * 30 セル = 10,650 グラム、つまり 10.65 キログラムになります。ケース自体を入れると約 11kg になります。オプティマスなら簡単に移動できるような重さです。

見せびらかす

ビデオのこの部分では、Teslabot が肩より上の高さにあるマシンからバッテリーを取り出している様子が見られます。これは、ボットの可動範囲を誇示する絶好の機会となります。

この画像では、ロボットの肩関節が上に回転しているのがわかり、脇の下がすべてきれいに覆われていることがわかり、テスラがピンチの可能性のあるポイントに対処したことを示しているようです。

この可動範囲があれば、Teslabot は、より制限された動きをもつロボットでは不可能なタスクを確実に実行できるようになります。

涼しく保つ

テスラは、ボットが自律的に重要なペイロードを運ぶため、過熱することなくこれを実行できることを強調しています。これは、以前のバージョンのアクチュエーターが限界に達したために過熱していたことを示唆しています。

ボットの寿命とパフォーマンスにとって、快適な熱エンベロープを維持することが重要であることは明らかです。また、ボットが空調の効いた工場で稼働していることも考慮する価値があります。ボットが実際に 40 度の日に食料品を持って歩いて店に戻るのであれば、暑さに耐えられるほうがよいでしょう。

オプティマスは階段を上れるようになりました

もしすべてがうまくいかなかった場合に、単に階段を駆け上がってロボットから逃げることを計画していたとしたら、あなたは運が悪いです。このビデオでは、テスラが階段を識別するソフトウェアを搭載し、安全ケーブルを使用したり、手すりに手を掛けたりすることなく階段を上ることができるようになったことが示されています。

ステップの前端にはハザードテープが貼られているが、これが必要なのか、それとも単なるトレーニングの一部なのかは不明だ。明らかに、現実世界ではすべての階段にこれが搭載されているわけではなく、改造されることも期待できないため、Teslabot は視覚のみを使用してこれを実現する必要があります。

ビデオの右下隅には、ビジョン システムによって作成された 3D の深度マップが表示されます。これは、ボットがアプローチの階段を明確に認識 (およびマッピング) したことを示唆しています。これは、ロボットが歩いているときに頭が下を向いていないためです。上のレベル。

階段を下りることもできるのでしょうか？それは興味深い質問であり、明らかにそうする必要がありますが、ビデオでそのようなことが起こっているのが見られないという事実は、おそらくそれがまだ開発の活発な領域であることを示唆しています。

オプティマスはエレベーターに乗れるでしょうか？これも現時点ではおそらくノーですが、建物内を移動するのにはるかに効率的な方法であることを考えると、将来的にはそうしなければならないことは間違いありません。

人間との交流

最後のシーケンスでは、小売店で行われるのと同様に、多数のテスラ従業員が商品を選択するために列に並んでいるのが見られます。人間が手を振り、オプティマスも手を振り返し、人間は欲しい商品を指さし、オプティマスはその物体を取り出して彼らに渡します（支払いに関するちょっとした問題は後で起こると思います）。

We, Robot イベントでオプティマスがこの動作をしているのを見たことがあるので、特に目新しいものはありません。

オプティマスが危険な行動に反応するショットがあります。人間はロボットであっても常に行儀よく振る舞うと思いがちですが、それが常に真実であるとは限りません。

ある段階で、人間が拳を差し出してロボットに向かって動かしますが、これはロボットを殴る試みをシミュレートしていると思います。 Teslabot の反応は、まるでそれは許されないと言わんばかりに指を立てるというものだった。これを音声やアラームと組み合わせて、事態が過熱した場合に他の人に警告できることは容易に想像できます。これは、Teslabot がセキュリティの役割を実行している展開に最も適している可能性があります。いずれにしても、これはソフトウェアのきちんとしたデモンストレーションです。

テスラの新しいオプティマスビデオについてのご意見をコメント欄でお知らせください。