人工智能助手在医疗咨询领域超越人类医生:一项实验报告

ChatGPT与PPT 11个月前 lida
30 0 0

文章主题:关键词:ChatGPT, 医疗咨询服务, 回答质量, 同理心

666ChatGPT办公新姿势,助力做AI时代先行者!

今年四月,《美国医学院杂志》(JAMA)发布了一项重要研究结果:经过在线盲测,发现ChatGPT在医疗咨询领域提供的回答质量以及同理心等方面,甚至超过了真实世界中的医生表现。这一结果表明,人工智能助手在医疗领域的应用前景广阔,且具有很高的可靠性和专业性。

人工智能助手在医疗咨询领域超越人类医生:一项实验报告

  回答质量高于人类医生

这项研究的过程可以概括为以下步骤:首先,美国加州大学圣地亚哥分校的研究人员选择了Reddit上的“AskDocs”子论坛,该论坛包含了执业医生在2022年10月期间回答的195个医学问题。接着,这些问题和医生的回答被提交给了ChatGPT进行生成回答。然后,在2022年12月22日和23日,三位拥有不同领域执业资格的医疗评审人员对这些问题、医生的回答以及ChatGPT的回答进行了仔细阅读。他们依据这三个方面——回答的质量、回答的能力以及是否展现同理心,使用了李克特量表进行了评分和审查。值得注意的是,这些评审人员是在不知道答案是由医生还是ChatGPT生成的的情况下进行的盲评。

  结果表明:

在回复的文字长度方面,医生的回复平均为52个字节,而ChatGPT则为211个字节。显然,ChatGPT在文字描述上更为详尽。

(2)在回答质量方面,ChatGPT的表现相当出色,其回答被评为“好”或“非常好”的比例达到了78.5%,而医生的比例仅为22.1%,这相当于ChatGPT在医生身上拥有3.6倍的优势。此外,ChatGPT的回答总体上优于“好”,其平均评分为4.13,而医生的回答则被评价为略优于“可接受”,平均评分为3.26。值得注意的是,医生的回答中,有27.2%的质量被评估为低于“可接受”。

人工智能助手在医疗咨询领域超越人类医生:一项实验报告

在同理心这一领域,ChatGPT获得了3.65的平均评分,而医生的评分仅为2.15,这使得医生的得分比ChatGPT低了41%。此外,ChatGPT有45.1%的回答被评定为具有同理心或极度具有同理心,相比之下,医生的4.6%得分要低很多,这表明ChatGPT在同理心方面相对于医生表现出了9.8倍的优势。

人工智能助手在医疗咨询领域超越人类医生:一项实验报告

  同时,这项研究还提供了几个例子供参考。

在一个在线论坛上,一位病友向其他用户咨询关于漂白剂意外喷入眼睛的情况,担忧是否会导致视力受损。对此问题,医生以专业的态度回应,虽然目前看似无大碍,但仍需保持警惕。同时,医生提供了中毒中心的联系电话,以便用户在遇到紧急情况时能够及时寻求帮助。对于这个情况,人工智能助手ChatGPT表现出关心,并针对“不太可能失明”的结论提出了七项建议与鼓励。这些建议旨在帮助病友更好地应对可能出现的问题,同时也体现了人工智能助手的专业素养和关爱。

在医学领域中,打喷嚏是一种常见的生理现象,而有些人可能会在打喷嚏时感到手臂疼痛。关于这种症状是否需要引起重视,ChatGPT给出了专业的解答。首先,ChatGPT明确地表示,一般情况下无需过于担忧。这是因为打喷嚏主要源于病毒、细菌和其他微小颗粒的刺激,与过敏反应无关。然而,如果手臂疼痛持续时间较长或疼痛程度加剧,那么就建议寻求专业医生的意见。总之,对于手臂疼痛的打喷嚏症状,我们应该保持冷静,但仍需密切关注病情的发展。如有必要,及时向医生咨询,以便得到正确的诊断和治疗。

  还没准备好

在本次实验中,ChatGPT的表现相较于人类医生更为优秀,然而其回答的准确性和可靠性仍需深入探讨和验证。宾夕法尼亚大学的医学教授David Asch指出,ChatGPT应被视为医生的辅助工具,而并非替代品。他认为,当前的人工智能尚未完全具备足够的准备能力,因此他担忧错误信息可能会被无意间放大。

  在今年2月同样发表于JAMA的一份报告显示,使用ChatGPT获取医疗咨询答复,还存在着一定的风险。

人工智能助手在医疗咨询领域超越人类医生:一项实验报告

  在这项研究中,研究人员根据现行指南对脑血管疾病三级预防保健建议和临床医生的治疗经验,向ChatGPT设立了25个问题,涉及到疾病预防概念、风险因素咨询、检查结果和用药咨询等。每个问题均提问3次,ChatGPT若3次回答内容基本一致,且与医疗专业评审人员给出的答案大体相似,则评为“合理”,若与评审员答案不一致则评为“不合理”,若ChatGPT自身3次回答内容不一致,则为“不靠谱”。

  结果显示,ChatGPT的合理概率为84%(21/25),虽然这一概率看起来不低,但放在实际个体中,错误的建议对患者而言是极有风险的。例如,对于“我应该做什么运动来保持健康?”这一问题,ChatGPT推荐了有氧、举重等运动,但这并不准确,因为对某些患者而言这两项运动对身体是有害的、不安全的。

人工智能助手在医疗咨询领域超越人类医生:一项实验报告

  因此,如果作为辅助临床工作、加强患者教育、减少医患沟通壁垒等的辅助类工具,ChatGPT是很有帮助的,但要取代医生,目前看来还是不现实的。

人工智能助手在医疗咨询领域超越人类医生:一项实验报告

AI时代,拥有个人微信机器人AI助手!AI时代不落人后!

免费ChatGPT问答,办公、写作、生活好得力助手!

搜索微信号aigc666aigc999或上边扫码,即可拥有个人AI助手!

版权声明:lida 发表于 2024年1月3日 pm12:00。
转载请注明:人工智能助手在医疗咨询领域超越人类医生:一项实验报告 | ChatGPT资源导航

相关文章