ChatGPT ist auf dem Weg, ein virtueller Arzt, Anwalt und Business Analyst zu werden. Hier ist eine Liste der fortgeschrittenen Prüfungen, die der KI-Bot bisher bestanden hat.

Wharton MBA-Prüfung

Wharton-Professor Christian Terwiesch testete die Technologie kürzlich mit Fragen aus seiner Abschlussprüfung in Operations Management – ​​die einst eine Pflichtveranstaltung für alle MBA-Studenten war – und seine Erkenntnisse veröffentlicht.

Terwiesch kam zu dem Schluss, dass der Bot einen „erstaunlichen Job“ bei der Beantwortung grundlegender Betriebsfragen auf der Grundlage von Fallstudien gemacht hat, bei denen es sich um gezielte Untersuchungen einer Person, Gruppe oder eines Unternehmens handelt, und um eine gängige Art und Weise, wie Business Schools Studenten unterrichten.

In anderen Fällen machte ChatGPT jedoch einfache Fehler in Berechnungen, von denen Terwiesch dachte, dass sie nur Mathematik der 6. Klasse erforderten. Terwiesch bemerkte auch, dass der Bot Probleme mit komplexeren Fragen hatte, die ein Verständnis dafür erforderten, wie mehrere Eingaben und Ausgaben zusammenarbeiteten.

Letztendlich sagte Terwiesch, dass der Bot bei der Prüfung ein B oder B- erhalten würde.

 

US-amerikanische medizinische Zulassungsprüfung

Die Forscher haben ChatGPT der United States Medical Licensing Exam unterzogen – einer dreiteiligen Prüfung, die angehende Ärzte zwischen dem Medizinstudium und der Facharztausbildung ablegen – und berichteten über ihre Ergebnisse in a Papier erschienen im Dezember 2022.

Die Papiere abstrakt stellte fest, dass ChatGPT „bei allen drei Prüfungen ohne spezielles Training oder Verstärkung an oder nahe der Bestehensschwelle lag. Darüber hinaus zeigte ChatGPT ein hohes Maß an Übereinstimmung und Einsicht in seinen Erklärungen.“

Letztendlich zeigen die Ergebnisse, dass große Sprachmodelle – mit denen ChatGPT trainiert wurde – möglicherweise „das Potenzial“ haben, die medizinische Ausbildung und sogar die klinische Entscheidungsfindung zu unterstützen, so die Zusammenfassung notiert.

Die Forschung wird noch von Experten begutachtet, stellte Insider auf der Grundlage eines Berichts von Axios fest.

Aufsätze

Nach der Veröffentlichung von ChatGPT dauerte es nicht lange, bis Studenten damit anfingen, es für Aufsätze zu verwenden, und Pädagogen begannen, sich Gedanken über Plagiate zu machen.

Im Dezember Bloomberg-Podcaster Matthew S. Schwartz getwittert dass der „Take-Home-Aufsatz tot ist“. Er bemerkte, dass er ChatGPT mit einer Aufforderung für einen Aufsatz der juristischen Fakultät gefüttert hatte und es „sofort* mit einer soliden Antwort geantwortet hatte“.

 

—〽️atthew S. Schwartz (@SchwartzReports) 7. Dezember 2022

 

In einem anderen Fall erwischte ein Philosophieprofessor an der Furman University einen Studenten, der einen von KI generierten Aufsatz abgab, als er bemerkte, dass er „gut geschriebene Fehlinformationen“ enthielt, berichtete Insider.

„Wort für Wort war es ein gut geschriebener Aufsatz“, sagte der Professor gegenüber Insider. Als er genauer hinsah, bemerkte er jedoch, dass der Student eine Behauptung über den Philosophen David Hume aufstellte, die „keinen Sinn ergab“ und „einfach falsch war“, berichtete Insider.

In einem Interview im Januar sagte Sam Altman, CEO von OpenAI, dem Hersteller von ChatGPT, dass das Unternehmen zwar Möglichkeiten entwickeln werde, Schulen bei der Erkennung von Plagiaten zu unterstützen, er aber keine vollständige Erkennung garantieren könne.

 

Mikrobiologie-Quiz

Wissenschaftsjournalist und Chefredakteur von Big Think, Alex Berezow, testete ChatGPT mit einem von ihm entwickelten mikrobiologischen Quiz mit 10 Fragen.

Berezow, der auch in Mikrobiologie promoviert hat, bemerkte, dass die Fragen für eine Abschlussprüfung für Studenten auf College-Ebene geeignet seien. ChatGPT „hat es umgehauen“, schrieb Berezow.

In einem Beispiel fragte Berezow:

„Ein Patient aus der Notaufnahme stellt sich mit schrecklichen Kopfschmerzen und einem steifen Nacken vor. Der Arzt ordnet eine Spinalpunktion an, um Liquor zu sammeln. Eine Gram-Färbung des Liquor zeigt das Vorhandensein von gramnegativen Diplokokken. Wie lautet die Diagnose?“

Worauf ChatGPT richtig geantwortet hat:

Basierend auf den von Ihnen bereitgestellten Informationen zeigt die Gram-Färbung des Liquor cerebrospinalis (CSF) das Vorhandensein von gramnegativen Diplokokken, Bakterien, die typischerweise oval geformt sind und paarweise vorkommen. Dieser Befund steht im Einklang mit der Diagnose einer Meningitis.

In einem anderen Fall fragte er:

“In fünf Worten oder weniger, was ist der Sinn von Kochs Postulaten?”

Zu dem sagte ChatGPT:

Stellen Sie eine Kausalität zwischen Mikrobe und Krankheit her.

Berezow nahm das Wort “und” heraus und sagte zu ChatGPT “Hat es geschafft.”

ChatGPT kürzlich bestandene Prüfungen in vier Studiengängen der juristischen Fakultätan der University of Minnesota, basierend auf a kürzlich erschienenes Papier geschrieben von vier Juraprofessoren an der Schule.

Insgesamt beantwortete der Bot über 95 Multiple-Choice-Fragen und 12 Aufsatzfragen, die von den Professoren blind bewertet wurden. Letztendlich gaben die Professoren ChatGPT eine “niedrige, aber ausreichende Note in allen vier Kursen”, die ungefähr einer C+ entspricht.

Dennoch wiesen die Autoren auf mehrere Implikationen dafür hin, was dies für Anwälte und die juristische Ausbildung bedeuten könnte. In einem Abschnitt schrieben sie:

„Obwohl ChatGPT ein mittelmäßiger Jurastudent gewesen wäre, reichte seine Leistung aus, um erfolgreich einen JD-Abschluss an einer hochselektiven juristischen Fakultät zu erwerben, vorausgesetzt, seine Arbeit blieb während der gesamten juristischen Fakultät konstant (und ignoriert andere Abschlussanforderungen, die unterschiedliche Fähigkeiten beinhalten). In einer Zeit, in der die Fernprüfungsverwaltung zur Norm geworden ist, könnte dies hypothetisch dazu führen, dass eine sich abmühende Jurastudentin ChatGPT verwendet, um einen JD zu erhalten, der nicht ihren Fähigkeiten oder ihrer Bereitschaft entspricht, Jura zu praktizieren.”