世界

このロボットはあなたが笑うかどうかを予測し、あなたの表情を真似します [Video]

研究者 ユハン・フー とコロンビア大学クリエイティブ・マシーンズ・ラボのホッド・リプソン教授と協力している他の研究者らは、 ロボット Emo と呼ばれる機械学習には、アイコンタクト、人間の笑顔をその瞬間またはその前に模倣するなどの顔の共同表現機能や、その他の顔の表情があります。 の エモ は、26個のアクチュエーターを搭載した顔の擬人化頭部で、幅広い表情表現が可能です。 ヘッドは磁気アタッチメントシステムを備えた柔らかいシリコンスキンで覆われており、簡単な調整と迅速なメンテナンスが可能です。 より現実的な対話を実現するために、研究者らは各目の瞳孔内に高解像度カメラを埋め込み、エモが非言語コミュニケーションに不可欠なアイコンタクトを取れるようにした。 チームは 2 つのモデルを開発しました AI: ターゲットの顔の微妙な変化を分析することで人間の表情を予測するものと、対応する顔の表情を使用して運動コマンドを生成するものです。 ロボットに表情の作り方を訓練するために、研究者らはエモをカメラの前に置き、ランダムな動きをさせた。 数時間後、ロボットは、人間が鏡を見て表情を練習するのと同じように、顔の表情と運動コマンドの関係を学習しました。 これはチームが「セルフモデリング」と呼んでいるものです。 次に、チームは人間の表情のビデオを実行して、フレームごとに観察しました。 数時間かかったトレーニングの後、エモは、人々が微笑もうとする意図を形成し始めるときの顔の小さな変化を観察することで、人々の表情を予測できるようになった。 研究者たちは現在、次のような大規模な言語モデルを使用して、口頭コミュニケーションを統合することに取り組んでいます。 チャットGPT エモで。 #このロボットはあなたが笑うかどうかを予測しあなたの表情を真似します #Video