研究目的

我們?cè)u(píng)估了 ChatGPT 對(duì)阻塞性睡眠呼吸暫停問題的回答質(zhì)量，以進(jìn)行患者教育，

并評(píng)估了聊天機(jī)器人如何被影響正確性、估計(jì)的等級(jí)水平和答案參考。

方法

ChatGPT 被查詢了 4 次，有 24 個(gè)相同的問題。

查詢因初始提示而異：無提示、患者友好的提示、醫(yī)生級(jí)別的提示以及統(tǒng)計(jì)/參考的提示。

答案按層次等級(jí)評(píng)分：不正確、部分正確、正確、統(tǒng)計(jì)或引文正確（“正確+”），或統(tǒng)計(jì)和引文均正確（“完美”）。

記錄了 Flesch-Kincaid 等級(jí)水平和引文發(fā)表年份作為答案。

使用卡方分析按提示類型比較增量分?jǐn)?shù)閾值的響應(yīng)比例。使用方差分析評(píng)估提示類型和年級(jí)水平之間的關(guān)系。

結(jié)果

在所有提示中（n = 96 個(gè)問題），69 個(gè)答案 (71.9%) 至少是正確的。

至少部分正確 ( P = .387) 或正確 ( P = .453) 的回答比例沒有因提示而異；

至少正確+ ( P < .001) 或完美 ( P < .001) 的回答也如此。

對(duì)統(tǒng)計(jì)/參考文獻(xiàn)的提示提供了 74/77 (96.1%) 的參考文獻(xiàn)。

患者友好提示的響應(yīng)平均等級(jí)水平 (12.45 ± 2.32) ，低于無提示 (14.15 ± 1.59)、

醫(yī)師級(jí)別提示 (14.27 ± 2.09) 和統(tǒng)計(jì)/參考提示 (15.00 ± 2.26) ( P < . 0001）。

結(jié)論

無論提示如何，ChatGPT 總體上都能為大多數(shù)有關(guān)阻塞性睡眠呼吸暫停的問題提供適當(dāng)?shù)拇鸢浮?/span>

雖然提示降低了回答等級(jí)水平，但所有回答仍然高于向患者提供醫(yī)療信息的公認(rèn)建議。

鑒于 ChatGPT 的快速實(shí)施，睡眠專家可能會(huì)尋求進(jìn)一步審查其醫(yī)學(xué)素養(yǎng)和對(duì)患者的實(shí)用性。

（葉妮摘自   J Clin Sleep Med. 2023;19(12):1989–1995.）