消化医护人员与新型聊天机器人在消化内镜癌症筛查相关知识的调查表现

作者：刘亚玲; 吕勇; 康晨曦; 王向平; 李静; 王陵; 王海英; 聂勇战; 吴开春; 潘阳林^*

来源：中华消化内镜杂志, 2023, 40(11).

• 内窥镜检查, 消化系统
• 食管肿瘤
• 胃肿瘤
• 结直肠肿瘤
• 筛查
• 机器学习

目的探讨并比较消化医护人员以及新型聊天机器人(ChatGPT和新必应)对消化内镜癌症筛查相关知识的知晓情况。方法问卷共设置23个消化内镜癌症筛查相关问题, 涉及消化道癌症的筛查年龄、高危因素、随访时间和消化内镜的优势和风险等。邀请消化医护人员通过电子问卷形式回答问题, 应用ChatGPT和新必应对每个问题分别进行10轮回答。以所有问题答案的正确率作为主要研究终点。采用方差分析比较消化医护人员与新型聊天机器人回答消化内镜筛查癌症相关知识的正确率, 采用单因素和多因素线性回归模型分析影响消化医护人员答题正确率的因素。结果共76名消化医护人员(规培医师21名、消化专科护士28名、消化专科医师27名)答题结果被纳入分析。规培医师、消化专科护士、消化专科医师、ChatGPT和新必应的回答正确率分别为36.4%± 10.9%、34.5%±10.2%、52.2%±12.6%、46.3%±9.8%和67.1%±9.3%, 差异有统计学意义(F=22.6, P<0.001)。新必应回答正确率最高(P<0.001);ChatGPT正确率和消化专科医师相当(LSD-t=-1.398, P=0.166), 均高于消化专科护士(LSD-t=2.956, P=0.004;LSD-t=5.955, P<0.001)和规培医师(LSD-t=2.402, P=0.018;LSD-t=4.951, P<0.001);消化专科护士和规培医师正确率相当(LSD-t=-0.574, P=0.567)。与新必应相比, 消化专科医师回答消化道癌症筛查不良事件、肠化生随访、结肠癌高危因素和筛查方法等问题的正确率低(P<0.05), 回答内镜不良事件和食管癌筛查方法问题的正确率高(P<0.05)。多因素线性回归模型分析显示消化专科医师(β=11.7, t=3.054, P=0.003)和问卷回答时间(≥7.6 min)(β=7.8, t=2.894, P=0.005)是消化医护人员回答正确率的独立影响因素。结论与消化医护人员相比, 新型聊天机器人——新必应回答癌症筛查相关问题的更准确, 但在内镜不良事件问题和食管癌筛查方法问题回答方面表现不佳。

• 单位
  中国人民解放军空军军医大学