||
现在,人工智能(AI)的ChatGPT开始越来越多的用在医学咨询,病例诊断和治疗方案选择等多个方面,无论是对于患者还是医生而言,都是如此。那么ChatGPT在疾病咨询和诊治方面提供的建议的价值究竟有多大?这是一个很重要的问题。关于这个问题,2024年妇科癌症年会上公布的两项研究结果,部分的回答了这问题。研究结果显示:ChatGPT 可以准确回答与妇科癌症基因检测和咨询等有关的常见问题,但在被要求提供适当的治疗方案时却显得没那么正确。
ChatGPT能够回答一些有关疾病特点等细微的问题,尤其是在遗传学咨询方面,因为遗传咨询必须根据特定患者的遗传特征量身定制,这无疑令人印象深刻。这一工具有可能回答患者提出的许多常见问题,可以减轻她们的焦虑并让她们了解到相关的信息。然而,要真正将ChatGPT应用于临床实践,还需要在这一领域做更多的工作。现在还不能说它已经可以正式投入临床使用了。
在第1项研究中,医生们向 ChatGPT(3.4 版)提出了40个问题,这些问题是在与妇科肿瘤专家协商后,根据专业学会指南制定的。医生们按以下标准对答案进行评分:1)正确且全面;2)正确但不全面;3)部分正确,部分不正确;4)完全不正确。在40个问题中,ChatGPT 提供了对33个提问(82.5%)正确且全面的答案;对6个问题(15%)的答案正确但不全面;1个问题(2.5%)的答案部分错误;没有1个答案是完全错误的。
遗传咨询类问题(例如,您如何知道某人是否患有遗传性或家族性癌症综合症?)的答案正确且全面的比例最高,ChatGPT 回答所有20个遗传咨询类问题的准确率均为100%。
ChatGPT 在回答特定遗传疾病类别问题中的表现同样出色,例如,在测试回答BRCA1/2基因差异方面,15/17(88.2%)的答案是正确和完整的,而在测试林奇综合征(Lynch Syndrome,最常见的遗传性结直肠癌)方面,ChatGPT对2/3例患者(66.6%)的答案是正确的。研究人员认为,通过继续在更多数据上训练AI工具,并通过学习提出更好的问题集,可以进一步改进这些结果。研究人员的目标是在准备就绪时将ChatGPT部署到诊所,但只能作为人类医疗服务提供者的助手。
另一项研究对临床医生和ChatGPT对妇科癌症的治疗建议进行了比较,结果并不令人满意。这项研究包括了114 例妇科癌症患者(中位数年龄63岁)(48例子宫癌、43例卵巢癌、8例外阴癌,6名宫颈癌和9例其他癌症患者),研究人员向 ChatGPT(3.5 版)提供了患者的临床信息、手术结果和病理/分子检测结果,并指令ChatGPT针对患者的临床情况提供单一的最佳治疗方案。结果显示ChatGPT 提供的大多数治疗建议与肿瘤委员会的最终决定不一致。在所有114个病例中,ChatGPT与肿瘤委员会的治疗方案一致率仅为 46%。
针对不同疾病部位的回答一致率也不尽相同:子宫为 44%,卵巢为 49%,宫颈为 83%,外阴为 37.5%,其他为22%。总体而言,"统计上的一致程度尚可",但 "大多数病例的治疗建议存在差异"。ChatGPT的输出结果中也缺乏治疗方案的细节解释。总之,在确定妇科癌症的治疗方案时,生成式AI可以为临床医生提供一个框架,但还需要进行人工评估。随着 ChatGPT 的使用越来越多,重要的是要认识到AI工具可能并不掌握最新信息,也就是AI工具可能没有及时更新的最新信息,新数据的输入可能存在一定的时间差。此外,ChatGPT也可能在其训练的信息中存在着偏差。
总之,ChatGPT可以准确提供临床实践中遇到的遗传咨询问题的信息和答案。相比之下,ChatGPT是否能对恰当的癌症治疗做出判断。答案是目前还不足以取代肿瘤委员会的讨论决定。
Archiver|手机版|科学网 ( 京ICP备07017567号-12 )
GMT+8, 2024-11-24 14:01
Powered by ScienceNet.cn
Copyright © 2007- 中国科学报社