研究探討了ChatGPT(GPT-4)在加拿大醫學放射技術協會(CAMRT)的放射技術、MRI、核子醫學和輻射治療認證考試中的表現。ChatGPT每次參加考試都重複進行五次,並根據問題類型和學科對其表現進行了分析。ChatGPT通過了考試,但在不同類型的問題上表現不同,對知識問題的表現最佳,對批判性思考問題的表現最差。在多次嘗試中,ChatGPT的回答之間存在著相當高的一致性至幾乎完美的一致性。該研究顯示,ChatGPT能夠通過放射技術師和治療師的認證考試,但在不同學科之間表現有所不同。未來研究應考慮在評估ChatGPT在標準化測試中的表現時使用重複測量。
PubMed
DOI