トップライン:
最近の研究によると、人工知能(AI)チャットボット「ChatGPT」は、コンテンツの質を維持しながら、オンライン上のがん関連患者情報の読みやすさを大幅に向上させることができるという。
方法論:
- がん患者は診断後にがんに関する情報をオンラインで検索することが多く、そのほとんどは腫瘍専門医のウェブサイトから情報を探します。しかし、オンライン資料は米国人口の平均読解力を超えていることが多く、アクセスしやすさや理解度が制限されています。
- 研究者らは、乳がん、大腸がん、肺がん、前立腺がん、膵臓がんに関するコンテンツを、6 年生の読みやすさレベルに書き直すよう ChatGPT 4.0 に依頼しました。コンテンツは、全米総合がんセンターネットワーク (NCCN) 加盟機関に関連する 34 の患者向け Web サイトのドキュメントのランダム サンプルから抽出されました。
- 書き換えられたコンテンツの読みやすさ、正確性、類似性、品質は、機械学習モデルの精度と再現性を評価する F1 スコア、類似性を測定し盗作の検出によく使用されるコサイン類似度スコア、AI によって書き換えられた情報の品質評価に役立つ DISCERN 機器など、いくつかの確立された指標とツールを使用して評価されました。
- 主な結果は、元のコンテンツと AI 生成コンテンツの平均読みやすさスコアでした。
取り除く:
- 元のコンテンツの平均可読性は大学1年生(13年生)レベルでしたが、AIによる改訂により、可読性は高校1年生(9年生)レベルに向上しました。
- 書き直されたコンテンツは精度が高く、全体的な F1 スコアは 0.87 でした (良好なスコアは 0.8 ~ 0.9)。
- 書き直されたコンテンツのコサイン類似度スコアは 0.915 と高かった (スコアの範囲は 0 から 1 で、0 は類似性がないことを示し、1 は完全な類似性を示す)。研究者は、読みやすさが向上したのは、より簡単な単語と短い文が使用されたためだとしている。
- DISCERN 機器を使用した品質評価では、AI によって書き換えられたコンテンツは元のコンテンツと同様に「良好」な品質評価を維持していることが示されました。
実際には:
社会はますますオンライン教材に依存するようになり、アメリカ人の半数以上が中学2年生以上の読み書きができていない可能性があることを考慮すると、私たちのAI介入は、患者の健康リテラシーと国内有数のがんセンターから受け取るコンテンツとの間のギャップを縮める潜在的な低コストの解決策を提供すると著者らは書いている。
ソース:
この研究は、テキサス州ダラスのUTサウスウェスタン医療センターのアンドレス・A・アブレウ医学博士が筆頭著者として行ったもので、 オンラインで公開 先月 全米総合がんネットワークジャーナル。
制限事項:
この研究は NCCN 会員ウェブサイトの英語コンテンツに限定されているため、調査結果は他の情報源や言語には一般化できない可能性があります。読みやすさだけでは理解を保証することはできません。資料のデザインや視聴覚補助などの要素は評価されません。
開示事項:
この研究では資金源は報告されていない。著者らはいくつかの情報を開示したが、いずれもこの研究とは関係がない。ハーバート・J・ゼー氏は、Surgical Safety Technologies の科学顧問を務めていたことを明らかにした。ポランコ氏は、Iota Biosciences および Palisade Bio のコンサルタント、および Intuitive Surgical の試験監督を務めていたことを明らかにした。