De dagelijkse medische actualiteit voor Belgische artsen en apothekers.
Zou ChatGPT het er even goed van afbrengen op een examen voor laatstejaarsstudenten geneeskunde? In Antwerpen namen onderzoekers de proef op de som.
Zou ChatGPT het er even goed van afbrengen op een examen voor laatstejaarsstudenten geneeskunde? In Antwerpen namen onderzoekers de proef op de som. “Hoe moeilijker de vraag, hoe beter de chatbots presteren”, zo klinkt het in De Standaard.
“We hebben verschillende bots in augustus vorig jaar het schriftelijk deel van het examen laten afleggen. Aan ChatGPT, Bard, New Bing, Claude Instant, Claude+ en GPT-4 hebben we dezelfde meerkeuzevragen voorgelegd als aan onze studenten”, zegt Stefan Morreel (UAntwerpen). Wat blijkt: niet alleen slaagden alle bots voor het examen, ze deden het met een score tussen 76 en 62 procent ook beter dan de toekomstige dokters. Die haalden gemiddeld 61 procent.
Zeker is dat de chatbots best niet alleen op basis van medische artikels worden getraind. “In eerder onderzoek werden bots die op het internet getraind waren, vergeleken met bots getraind op PubMed (een databank met medische artikels). Die laatste scoorden slechter dan de bots die gewoon op het internet werden getraind.”
Meer lezen
https://www.standaard.be/cnt/dmf20240717_95866760