Assessing the accuracy and consistency of answers by ChatGPT to questions regarding carbon monoxide poisoning.
評估 ChatGPT 對一氧化碳中毒問題的回答準確性和一致性。
PLoS One 2024-11-20
這項研究評估了ChatGPT在一氧化碳中毒問題上的回答準確性,使用了「醫學考試助手(Yi Kao Bang)」的44道單選題。研究發現,約50%的回答一致,但有三分之一的回答顯著不同。準確率方面,中文為61.1%,英文為57%。這顯示ChatGPT雖然提供了一些有用資訊,但在醫療情境下,特別是針對一氧化碳中毒的可靠性仍不足,因此不應取代醫療專業人員的臨床決策。
PubMedDOI♡
站上相關主題文章列表
Assessing the Accuracy and Reliability of AI-Generated Medical Responses: An Evaluation of the Chat-GPT Model.
評估 AI 生成的醫學回應的準確性和可靠性:對 Chat-GPT 模型的評估。
Res Sq 2023-10-20
ChatGPT's Skills in Statistical Analysis Using the Example of Allergology: Do We Have Reason for Concern?
ChatGPT 在統計分析方面的能力,以過敏學為例:我們應該擔心嗎?
Healthcare (Basel) 2023-10-03
Performance of ChatGPT on the Chinese Postgraduate Examination for Clinical Medicine: Survey Study.
ChatGPT 在中國臨床醫學研究生考試中的表現:調查研究。
JMIR Med Educ 2024-02-27
Performance of ChatGPT on Chinese national medical licensing examinations: a five-year examination evaluation study for physicians, pharmacists and nurses.
ChatGPT 在中國國家醫學資格考試中的表現:醫師、藥師和護士五年考試評估研究。
BMC Med Educ 2024-02-17
ChatGPT's Response Consistency: A Study on Repeated Queries of Medical Examination Questions.
ChatGPT 的回應一致性:對醫學檢查問題重複查詢的研究。
Eur J Investig Health Psychol Educ 2024-03-29
研究比較了ChatGPT 3.5和ChatGPT 4回答醫學考試問題的表現,結果發現ChatGPT 4在準確度(85.7% vs. 57.7%)和一致性(77.8% vs. 44.9%)方面有明顯進步。這顯示ChatGPT 4在醫學教育和臨床決策上更可靠。但人類醫療服務仍然不可或缺,使用AI時應持續評估。
PubMedDOI
Evaluating ChatGPT's effectiveness and tendencies in Japanese internal medicine.
評估 ChatGPT 在日本內科醫學中的效果和傾向。
J Eval Clin Pract 2024-05-20
Evaluating the scientific reliability of ChatGPT as a source of information on asthma.
評估 ChatGPT 作為哮喘資訊來源的科學可靠性。
J Allergy Clin Immunol Glob 2024-09-27