ChatGPT 在回答医学问题方面有多准确?

ChatGPT中文站
Image created by Esther M.

人工智能(AI)在全球各个领域,包括医疗保健领域都得到了广泛应用。在这些进展中,OpenAI的ChatGPT已经成为回答医学问题的重要参与者。本文将探讨它与人类医生的比较以及支撑其性能的技术。

准确性:ChatGPT与医生比较

由美国国家医学图书馆发布的一项研究评估了ChatGPT对医学问题的准确性。来自17个不同专业的医生向ChatGPT提出了284个医学问题,并以1(完全不正确)到6(完全正确)的评分标准对AI的回答进行了评分。令人印象深刻的是,ChatGPT获得了5.5的中位数分数,相当于约92%的准确性。

当涉及到问题的难度时,ChatGPT 保持了较高的表现,即使是更复杂的查询也是如此。这表明,即使面对复杂的医学问题,ChatGPT 也可以提供高度准确的回答,往往与实习医生的知识相匹配。

ChatGPT的准确性在二元(是/否)和描述性回答中保持一致。该人工智能在更复杂的查询上得分略低,但仍表现出良好的性能。该AI的平均准确率分数在77%至100%之间变化,取决于问题的难度,这意味着虽然它存在一些限制,但它可以提供扎实的医学信息基础。

同理心:ChatGPT vs. 医生

你在考虑同情心时可能并不会想到人工智能,但ChatGPT在这个领域也取得了重大进展。在《美国医学会内科杂志》上发表的一项研究中,ChatGPT与医生对决,回答来自社交媒体论坛的患者问题。

每个回复都被评估其信息的质量和表现出的同情心。结果表明,在超过78%的情况下,评估者更喜欢ChatGPT的回复而不是医生的回复。此外,ChatGPT的回复被评为更具同情心,在同情心或非常同情心回复方面的得分几乎是医生的十倍。

表演背后的科学

ChatGPT是基于GPT-4架构的语言预测模型。它通过计算每个后续单词的概率来生成回答,基于之前出现的单词。该模型已经接受了各种不同范围的网络文本训练,但并不知道特定文档是训练集的一部分。此外,ChatGPT并不像人类一样理解语言,也没有信仰或欲望。

限制和道德考虑

虽然ChatGPT的表现令人印象深刻,但了解它的局限性也是至关重要的。截至撰写本文时,ChatGPT未经设计用于提供个性化医学建议,不应替代医生的就诊。此外,它可能无法始终正确解释复杂或模糊的医学查询,从而导致潜在的误解或不准确性。

此外,将人工智能整合到医疗保健中引发了伦理问题。当我们允许人工智能在医疗保健中扮演更重要的角色时,我们必须考虑潜在的歧视风险、隐私问题和错误信息的可能性。因此,对于人工智能在医疗保健中的使用,制定伦理准则以应对这些挑战至关重要。

结论

AI技术(如ChatGPT)在医学领域显示出了很大的潜力。高准确度的响应和出乎意料的沟通共情力表明,AI可以成为医疗保健专业人员和患者都能使用的有用工具。然而,尽管能力令人印象深刻,但重要的是要记住,AI不能取代人类医生。它可以作为医疗专业知识的强有力补充,提供一个可随时访问的信息和支持来源。随着我们向以数字技术为基础的医疗保健未来发展,人工智能和人类智能的融合可能会带来医疗沟通和患者护理方面的显着改进。

2023-10-20 16:54:17 AI中文站翻译自原文