当你需要一种严重疾病的准确信息时,你应该去谷歌还是 ChatGPT?
加州大学河滨分校
7月28日消息
一项由加州大学河滨分校(University of California, Riverside,UCR)的计算机科学家领导的跨学科研究发现,对于寻找阿尔茨海默病(Alzheimer’s disease,AD)和其他形式的失智症信息的人来说,两种互联网信息收集服务各有优缺点。该团队包括来自阿拉巴马大学(University of Alabama,UA)和佛罗里达国际大学(Florida International University,FIU)的临床科学家。
研究结果于近日发表在《医学互联网研究杂志》(Journal of Medical Internet Research,JMIR)上,标题为“ChatGPT 与谷歌关于失智症和其他认知能力下降相关的查询:结果比较”( ChatGPT vs Google for Queries Related to Dementia and Other Cognitive Decline: Comparison of Results)。
研究于2023年7月25日发表在《Journal of Medical Internet Research》(最新影响因子:7.4)杂志上
研究人员发现,谷歌提供了最新的信息,但由于服务和产品提供商寻求客户,查询结果会发生偏差。与此同时,ChatGPT 提供了更加客观的信息,但在其叙事回应中可能会过时,缺乏信息来源。
加州大学河滨分校伯恩斯工程学院(Bourns College of Engineering)的计算机科学与工程教授 Vagelis Hristidis 说:“如果你选择两者的最佳功能,你可以构建一个更好的系统,我认为这将在未来几年发生。”
Vagelis Hristidis(又名Evangelos Christidis)
在他们的研究中,Hristidis 和他的合著者向谷歌和 ChatGPT 提交了 60 个问题,这些问题是失智症患者及其家人提交的典型问题。
研究人员关注失智症是因为超过 600 万美国人受到阿尔茨海默病或相关疾病的影响,该研究的合著者、阿拉巴马大学社会工作教授 Nicole Ruggiano 说。
Ruggiano说:“研究还表明,失智症患者的照护者是在寻求健康信息方面最积极的利益攸关方之一,因为他们的任务往往是为亲人的护理做出决定。”
研究人员提出的问题中有一半是关于疾病过程的信息,而另一半是关于帮助患者及其家人的服务的信息。
结果喜忧参半
“谷歌拥有更多最新的信息,涵盖了一切,” Hristidis 说,“而 ChatGPT 每隔几个月进行一次训练。所以,它落后了。假设上周有某个新药问世,你在 ChatGPT 上找不到它。”
ChatGPT 较谷歌提供了更可靠、更准确的信息。这是因为 OpenAI 的 ChatGPT 创建者在通过计算密集型机器学习训练 ChatGPT 时选择了最可靠的网站。然而,用户对具体的信息来源一无所知,因为由此产生的叙述缺乏参考。
然而,谷歌有一个可靠性问题,因为它基本上“涵盖了从可靠来源到广告的所有内容,” Hristidis 说。
事实上,广告商向谷歌付费,让他们的网站链接出现在搜索结果页面的顶部。因此,用户通常首先会看到试图向他们出售护理相关服务和产品的盈利性公司网站的链接。因此,从谷歌搜索中找到可靠的信息需要一定的用户技能和经验,Hristidis 说。
合著者之一,佛罗里达国际大学的护理学副教授 Ellen Brown 指出,家庭需要及时了解有关阿尔茨海默病的信息。
Brown 说:“虽然目前还没有治愈这种疾病的方法,但许多临床试验正在进行中,最近 FDA 批准了一种治疗早期阿尔茨海默病的有前景的疗法。因此,对于希望了解最新发现和可用治疗方法的家庭来说,最新的信息是重要的。”
该研究的作者写道,“健康相关信息的来源和日期以及其他语言的可用性可能会增加这些平台对非医疗和医疗专业人员的价值。”
谷歌和 ChatGPT 的可读性得分均较低,这使得教育水平较低和健康素养技能较低的人很难阅读。
“我的预测是,可读性是更容易改善的事情,因为已经有一些工具,一些人工智能方法,可以阅读和解释文本,” Hristidis 说,“在提高可靠性、准确性等方面,这要困难得多。别忘了,科学家们花了几十年的人工智能研究才建立了ChatGPT。从我们现在的情况来看,这将会是一个缓慢的进程。”
创立于1907年的加州大学河滨分校
参考文献
Source:University of California - Riverside
Google & ChatGPT have mixed results in medical information queries
Reference:
Vagelis Hristidis, Nicole Ruggiano, Ellen L Brown, Sai Rithesh Reddy Ganta, Selena Stewart. ChatGPT vs Google for Queries Related to Dementia and Other Cognitive Decline: Comparison of Results. Journal of Medical Internet Research, 2023; 25: e48966 DOI: 10.2196/48966
免责声明
本公众号上的医疗信息仅作为信息资源提供与分享,不用于或依赖于任何诊断或治疗目的。此信息不应替代专业诊断或治疗。在做出任何医疗决定或有关特定医疗状况的指导之前,请咨询你的医生。
原文标题:谷歌和ChatGPT在医疗信息查询中的结果不一
- 开元体育官方网站