最近の 科学レポート この研究では、結腸直腸がん (CRC) に関連する質問に答える際の ChatGPT の習熟度を調査しました。
勉強： 医療における AI の評価: 結腸直腸がんの質問に対する専門家と ChatGPT の回答の比較分析。 画像クレジット: Miha Creative/Shutterstock.com
背景
世界的に見て、大腸がんはがんによる主な死亡原因の 1 つです。 医学分野の進歩にもかかわらず、大腸がん患者の生存率は低いです。
CRC に関連する死亡率を減らすには、この病気を早期に診断し、包括的な治療とケアを提供することが不可欠です。
大腸がんの早期発見を妨げる主な要因の 1 つは、大腸がんの症状に関する認識の欠如です。 多くの患者は、アクセス可能な知識が不足しているため、大腸がんの重大な兆候を見落としており、医師にタイムリーに助けを求める機会が遅れています。
CRC に関するオンライン情報の多くは誤解を招くものであることにも注意する必要があります。 UpToDate や MSD マニュアルなどの査読済みリソースのほとんどは、一般大衆ではなく医療専門家向けに作られています。
病気に関する信頼できる情報を得るために、患者が簡単に操作できる信頼できるプラットフォームを開発することが重要です。 これらのプラットフォームは、理解しやすい医療情報を提供し、いつ医師の診察を受けるべきかについての重要なガイダンスを提供する必要があります。
ChatGPT は、深層学習と大規模言語モデル (LLM) に基づく無料の AI システムです。 ChatGPT は幅広いプロンプトに応答するため、医療を含む多くの分野に適用できます。
このテクノロジーは、一般の人々にさまざまな病気について教育するために使用できます。 したがって、この AI ベースのプラットフォームにより、患者は十分な情報に基づいて健康に関する意思決定を行うことができます。 その後、このテクノロジーは病気の早期診断とより良い治療結果につながる可能性があります。
研究について
ChatGPT の医療における有効性は多くの研究で示されていますが、その精度を評価するにはさらに多くの研究が必要です。 この目的のために、現在の研究では、CRC の診断と治療に関する ChatGPT の熟練度を調査しました。
中国で出版された「結腸直腸がん: あなたの質問に答えます」に関する本は、CRC に関する質問への回答に関する ChatGPT (GPT-3.5 バージョン) の精度を評価するために参照されました。
ChatGPT には、外科的管理、放射線療法、内科的治療、ストーマ治療、介入治療、疼痛管理、深部静脈治療など、CRC のさまざまな側面をカバーする合計 131 の質問がありました。
ChatGPT の精度をテストするために、テストの質問にはすでに専門家が回答しています。 各質問に対する ChatGPT の回答は、CRC を専門とする臨床医師によって評価および採点されました。
研究結果
ChatGPT 結果の再現性が検査され、精度と包括性が高いレベルで均一であることが示されました。 ChatGPT の応答の一貫した再現性は、正確な医療情報の提供におけるこのシステムの信頼性を示しています。
ChatGPT は有望な精度を示しましたが、包括性という点では不十分でした。 ChatGPT のこの欠点は、広範で非特定のデータを使用した AI モデルのトレーニングに関連している可能性があります。
したがって、ChatGPT のような AI モデルを特定のデータまたは特殊なデータで更新すると、モデルの応答の深さと幅が大幅に改善されます。
ChatGPT の総合スコアは、特に放射線療法、ストーマ ケア、疼痛管理、静脈ケアにおいて、このモデルのパフォーマンスが非常に優れていることを示しました。
ChatGPT は、CRC 関連の質問に対して有効な回答を提供するという点では優れたパフォーマンスを示しましたが、特に外科管理、基本情報、および内科に関しては、依然として専門知識が不足していました。 このパフォーマンスの低下により、ChatGPT のような AI モデルの臨床現場での導入が妨げられると予想されます。
結論
現在の研究には、CRC に関連する有効な質問の数が不十分であるなどの限界があります。 さらに、この研究では CRC の公衆衛生書をデータ ソースとして使用しましたが、これにより CRC に基づく質問の種類が基本的に制限されました。
質問は著者によって慎重に選択されているため、患者とその家族が実際に抱くすべての質問が含まれているわけではありません。 この研究のもう 1 つの制限は、CRC ベースの質問に対する ChatGPT の回答を採点するためのベンチマークとして本の回答を使用していることです。
現在の研究では、CRC の質問に関する ChatGPT の可能性と限界が浮き彫りになりました。
ここで提示された洞察は、CRC を正確に診断し、早期治療を促進するのに役立つ将来の改良された ChatGPT バージョンの基礎となる可能性があります。
将来の研究では、現実世界を調査するためにより大きなサンプルサイズを使用する必要があります の効能 チャットGPT。 さらに研究者は、個人の健康情報と AI モデルを統合して、患者にパーソナライズされた情報を提供する方法を模索する必要があります。
1707304923
#ChatGPT #は結腸直腸がんに関する質問への回答において専門家を上回ることができるでしょうか
2024-02-07 11:09:00