ChatGPT が病気の診断で医師を破った

夏を越えて、 研究者は不合格点を与えた 病気の診断に関して人工知能を活用したところ、150 件のケーススタディを読んだチャットボットが正しい状態を診断する確率は 50% 未満であることがわかりました。 「現在の形式のChatGPTは診断ツールとして正確ではない」との研究結果 プロスワン と指摘した。しかし、新しい研究で AI の単独診断スキルが大幅に向上していることが示されているため、ボットは診断に力を入れてきたに違いありません。の ニューヨークタイムズ 先月出版された研究報告書 JAMAネットワークオープン このジャーナルには、50 人の医師が参加した実験の詳細が記載されており、半分は OpenAI の ChatGPT-4 アシスタントを使用し、残りの半分は使用しませんでした。 Google や UpToDate などの医療参照サイトなど、従来の診断方法に依存していない人は、 リリース。

ボットだけにも、手元にある 6 つのケーススタディを読み、診断と結論に達する根拠を提供する機会が与えられました。エントリーを採点した人たちは、ChatGPT が何らかの関与をしているかどうか全く知りませんでした。結果: ボットは 90% の確率で問題の病状を正確に識別しました。ただし、AIを使用した人間の医師と使用しなかった医師の間には大きな差はなく、それぞれ76％と74％のスコアでした。 「LLM [large language model] LLM が利用可能だった場合でも医師だけが医師を上回っており、臨床意思決定支援システムにおける AI の可能性を実現するには、人間とコンピューターのインタラクションのさらなる開発が必要であることを示しています」と研究者らは指摘しています。

ごとに 回、実際の患者に基づいた問題のケーススタディは、これまでに公開されたことがありませんでした。つまり、人間の医師と同じように、ChatGPT が患者を対象にトレーニングすることはできず、初めて患者を診察したことになります。では、なぜ ChatGPT を使用した医師は、単独で作業したボットと同様の結果が得られなかったのでしょうか?研究者らは、医師の多くはAIの全機能を最大限に活用する方法を知らなかった可能性があると指摘しているが、同時に人間は自分の意見に関しては頑固になる可能性があるとも述べている。 「AIが同意できないことを言ったとき、彼らはAIの言うことを聞かなかった」と研究共著者のアダム・ロッドマン氏は語る。 回。この研究には関与していないエラスムス医療センターのローラ・ズワーン氏も同意し、「人は一般に、自分が正しいと思うと自信過剰になる」と指摘した。 （もっと 発見 物語。）