Examining the Threat of ChatGPT to the Validity of Short Answer Assessments in an Undergraduate Medical Program.
ChatGPT對大學醫學課程短答案評估效度的威脅檢驗。
J Med Educ Curric Dev 2023-10-04
The impact of ChatGPT on human data collection: A case study involving typicality norming data.
ChatGPT對人類數據收集的影響:涉及典型性規範數據的案例研究。
Behav Res Methods 2023-10-03
ChatGPT prompts for generating multiple-choice questions in medical education and evidence on their validity: a literature review.
在醫學教育中產生多重選擇題的ChatGPT提示及其有效性的證據:文獻回顧。
Postgrad Med J 2024-06-06
Assessing ChatGPT's Capability for Multiple Choice Questions Using RaschOnline: Observational Study.
使用RaschOnline評估ChatGPT在多選題上的能力:觀察性研究。
JMIR Form Res 2024-08-08
Could ChatGPT get an engineering degree? Evaluating higher education vulnerability to AI assistants.
ChatGPT 能獲得工程學位嗎?評估高等教育對 AI 助手的脆弱性。
Proc Natl Acad Sci U S A 2024-11-26
隨著像 ChatGPT 這樣的 AI 助手在高等教育中越來越普及,學生的使用帶來了教學與評量上的好處與挑戰。本研究針對大學評量在 STEM 課程中對生成式 AI 的脆弱性進行探討,分析了洛桑聯邦理工學院 50 門課程的評量題目。結果顯示,GPT-4 的正確回答率達 65.8%,使用不同提示策略時可達 85.1%。這顯示 AI 系統能通過許多核心課程的評量,讓人擔憂高等教育的認證完整性,並需重新評估評量設計以應對 AI 的進步。
PubMedDOI