世界

心を読むAIは、麻痺した人間の脳波を即座の音声に変えます

麻痺がある男性が脳コンピューターインターフェイスシステムに接続されていますリサ・Eハワード/マイトリーニー・ワイラグカルら。 2025 話す能力を失った男性は、リアルタイムの会話を開催し、脳制御の合成声を通して歌うことさえできます。 脳コンピューターの界面は、脳に埋め込まれた電極を介して男性の神経活動を読み取り、彼の意図したピッチ、イントネーション、強調を反映する音声音を即座に生成します。 「これは、25ミリ秒以内に、瞬時の音声合成のための最初の種類です」と、カリフォルニア大学デイビス校のセルゲイ・スタヴィスキーは言います。 スピーチを理解しやすくするために、この技術を改善する必要がある、とUC DavisのMaitreyee Wairagkar氏は述べています。しかし、Wairagkarによれば、筋萎縮性側索硬化症のために話す能力を失った男性は、彼を「幸せ」にし、彼の本当の声のように感じると言っています。 脳コンピューターインターフェイスを使用する音声神経球体はすでに存在しますが、これらは一般に脳の活動を音に変換するのに数秒かかります。 Stavisky氏によると、人々は中断したり、明確にしたり、応答したりすることができないため、自然な会話を激しくします。 「接続が悪いと電話で会話するようなものです。」 より現実的にスピーチを統合するために、Wairagkar、Stavisky、および彼らの同僚は、話すために使用される顔の筋肉を制御するのに役立つ256個の電極を男性の脳の部分に移植しました。その後、複数のセッションで、研究者は彼に画面上で何千もの文章を見せ、脳の活動を記録しながら、時には特定のイントネーションで声を出して言ってみるように頼みました。 「たとえば、「今日は元気ですか？」または 'お元気ですか 今日？」、そしてそれは文の意味論を変えます」とStaviskyは言います。 「それは、はるかに豊かで、より自然な交換になり、以前のシステムと比較して大きな前進をもたらします。」 次に、チームは、そのデータを、神経活動の特定のパターンを男性が表現しようとしている言葉と変曲と関連付けるように訓練された人工知能モデルに供給しました。その後、マシンは脳信号に基づいて音声を生成し、彼が言うつもりだったことと彼がそれをどのように言いたいかの両方を反映した声を生み出しました。 研究者たちは、音声クローニングテクノロジーを使用して合成音声を自分のように聞こえるようにするために、男性の状態が進む前から音声録音でAIを訓練しました。 実験の別の部分では、研究者は彼に異なるピッチを使用してシンプルなメロディーを歌おうとしました。彼らのモデルは、意図したピッチをリアルタイムで解読し、それが生成した歌声を調整しました。 彼はまた、このシステムを使用して、促されることなく話し、「うーん」、「eww」、作り上げの言葉などの音を生み出します、とWairagkarは言います。 「彼は非常に明確で知的な男です」と、UC DavisのチームメンバーであるDavid Brandman氏は言います。 「彼は麻痺していて、フルタイムで働き続け、意味のある会話をすることから話すことができませんでした。」 トピック： #心を読むAIは麻痺した人間の脳波を即座の音声に変えます