UCSF Healthの研究チームが、大規模言語モデル(LLM)を用いた退院サマリーが医師によるものと同等の正確性と患者の安全性を持つかどうかについての研究を実施しました。
この研究には、クリストファー・ウィリアムズ氏をはじめとする24人の研究者が、サンフランシスコのカリフォルニア大学で100件の入院患者データをランダムに選び、LLMと医師による退院サマリーの品質を盲検法で比較しました。
結果、LLMが生成した文書は、医師によるものと全体的な品質で大きな差はなく、コンパクトでわかりやすいものでしたが、網羅性では劣ります。
しかし、潜在的な危害の点では、どちらも同程度の結果が出ました。この研究では、LLMを使った退院サマリーが、医師のレビューを経て臨床で活用するのに有用である可能性を示唆しています。
出典 : Researchers: LLM-Produced Discharge Summaries Comparable to MD-Produced Ones https://www.hcinnovationgroup.com/analytics-ai/article/55288186/researchers-llm-produced-discharge-summaries-comparable-to-md-produced-ones