ChatGPT s’est avéré capable de passer des examens pour le MBA et l’examen de licence médicale

La communauté universitaire est de plus en plus préoccupée par le fait que les étudiants utilisent ChatGPT à des fins moins qu’honnêtes, car il s’est avéré capable non seulement d’écrire des dissertations pour les élèves du secondaire, mais aussi de réussir certains examens, tels que des parties de ceux utilisés pour licencier les médecins et accorder MBA.

Dans deux nouveaux articles publiés sur des serveurs de préimpression, une équipe et un autre chercheur ont testé indépendamment la capacité de ChatGPT à passer et réussir des examens. Dans la première, une équipe composée de membres d’AnsibleHealth, Inc., de l’Université Brown et d’OpenAI, Inc. décrit les tests qu’ils ont effectués pour voir dans quelle mesure ChatGPT pouvait réussir à l’examen de licence médicale des États-Unis (USMLE) et a publié leurs résultats sur le médRXiv serveur de préimpression.

Dans le second, Christian Terwiesch, professeur Andrew M. Heller à la Wharton School de l’Université de Pennsylvanie, a publié un article sur le site de prépublication de Wharton, décrivant comment il a testé la capacité du chatbot à réussir l’examen final d’un MBA en gestion des opérations typique. cours de base et ce qu’il a trouvé.

Dans le premier article, les chercheurs ont testé le chatbot sur les trois parties de l’USMLE, que les diplômés en médecine doivent réussir pour devenir médecins. Ils ont trouvé qu’il fonctionnait suffisamment bien pour passer ou presque passer tous les seuils requis pour l’obtention d’un permis. Ils ont également noté qu’il était capable de créer des passages écrits très cohérents et montraient le type de perspicacité dont une personne aurait besoin pour devenir un médecin prospère. Plus précisément, ChatGPT a obtenu plus de 50 % sur la plupart des tests, ce qui, selon les chercheurs, se situe confortablement dans la plage de réussite.

Dans le deuxième article, Terwiesch a utilisé le GPT-3 d’OpenAI (le modèle de base de ChatGPT) pour passer l’examen final d’un cours de gestion des opérations. Il l’a ensuite noté comme il le ferait pour n’importe quel étudiant régulier. Il a constaté qu’il aurait donné au papier un B, ou au pire un B-, plus que suffisant pour réussir. Il note en outre qu’en plus de donner des réponses correctes, le chatbot a pu fournir de bonnes explications pour ses réponses.

Il a également retourné le chatbot sur lui-même, lui demandant s’il pouvait proposer des questions d’examen qui n’apparaissent pas sur les examens à Wharton, et a découvert que c’était possible, parfois avec des résultats humoristiques. Il note également que même si ses conclusions peuvent sembler désastreuses, il s’attend à ce que Wharton et d’autres écoles trouvent des moyens d’empêcher ChatGPT et d’autres comme lui de subvertir le processus d’éducation – et le monde des affaires trouvera probablement un moyen de mettre ChatGPT à bon escient, juste comme il l’a fait avec d’innombrables autres outils.

© 2023 Réseau Science X