自然言語を理解して複雑なタスクを実行する AI ロボット [Video]

ザ メンティー・ロボティクス イスラエルに拠点を置くモービルアイとAI21 Labsの創設者アムノン・シャシュアが共同設立した新興企業が秘密を破り、過去2年間取り組んできたプロジェクトを明らかにした。 人型ロボット 名前で メンティーボット。

まだオリジナルのままですが、 メンティーボット テクノロジーを備えた家庭や倉庫の用途に重点を置いて設計されています AI、によって普及された大規模言語モデル (LLM) を含む チャットGPT 彼女 OpenAI および人工知能分野の他の主要企業。

同社はこれを、複雑なタスクを最初から最後まで完了できるAI搭載ロボットだと説明している。 この分野の他のほとんどのプレーヤーは、それを利用するために製品を進化させています 人工知能で製品を作るのではなく、 最初から AI ファーストのアプローチを採用。 ザ メンティー AIロボットが音声コマンドを受け取り、動き、シーンの理解、物体の検出と追跡、把握を伴う応答で必要なタスクを処理する様子を示すビデオも投稿しました。

人型ロボットは何年も前から存在していますが、このベンチャーは主に機械が現実世界とどのように相互作用するかを改善することに焦点を当てており、次のような側面をカバーしています。 人間の動きや器用さを模倣すること。

これまでのロボットのほとんどは、制御された環境で箱を落とすなどの特定のタスクを実行するために、事前にプログラムされているか、ソフトウェア プラットフォームで制御されていました。 その後、数年前に、言語と身体的学習モデルが注目を集めました。 すぐに多くのロボット メーカーがこのテクノロジーを (主にパートナーシップを通じて) 採用し、自社のヒューマノイドがユーザーの質問を自然言語で理解し、時間をかけて学習しながらそのタスクを実行できるようにしました。

ザ メンティー も同様のことを行っているが、開発中の既存のヒューマノイドに AI を導入するのではなく、同社はあらゆる機能レベルで AI を備えたヒューマノイドの構築に取り組んでいる。 同社によると、オリジナルは メンティーボット 人間が与えたコマンドを現実世界での複雑なアクションに変換します。 人工知能 3 つの基本レベルで。

まず、使用するのは、 革新的な LLM コマンドを解釈し、タスクを完了するために必要な手順を「考える」こと。 次に、使用 NeRF に基づくアルゴリズムは、さまざまなオブジェクトに関するセマンティック情報を補足した環境のリアルタイム認知 3D マップを構築し、障害物を回避するための動的な経路を計画しながらマップ上で自身の位置を特定します。 最後に、シミュレーターから現実への機械学習アプローチを使用して、プログラムされたパス内のプログラムされたステップを実行します (シム２リアル）、シミュレートされた環境で必要な動きを定義し、それを現実世界の歩行や手の動きに適用します。

で紹介されたロボットですが、 デモビデオ キッチンに入り、果物をある場所から別の場所に移動するという基本的なタスクを実行しているように見えますが、次のことに注意することが重要です。 彼は単一のコマンドでタスクを実行しませんでした。 ユーザーはロボットにキッチンに行って待つように指示し、次に果物を次の場所に取りに行くように指示しました。 ロボットが単一のコマンドで同じタスクを実行できるかどうかはまだわかりません。

そうは言っても、それを考えると、 これはオリジナルです、時間の経過とともにロボットが改善され、段階的な指示なしで複雑なコマンドを処理できる能力を獲得することが期待できます。 これは、住宅や倉庫環境で実用的なアプリケーションを提供するために非常に重要です。

ザ メンティー一方、ヒューマノイドの最終量産対応バージョンは、カメラ付きセンサー、前例のない器用さをサポートする独自の電気モーター、および完全に統合された人工知能によってのみ駆動されると報告しています。 導入の準備が整います 2025 年の第 1 四半期、ただし、同社は最初にどのセグメントをターゲットにする予定であるかは確認していません。

[Menteebot]