CFOTO/Future Publishing über Getty Images
- ChatGPT von OpenAI hat mathematische und naturwissenschaftliche Tests nicht bestanden, die Sechstklässler in Singapur absolvieren.
- Es machte Fehler bei der einfachen Addition und konnte laut The Straits Times keine Diagramme verstehen.
- Aber ChatGPT schien aus seinen Fehlern gelernt zu haben. Es hat einige Fragen richtig gestellt, als Insider es getestet hat.
Als der virale, KI-gestützte ChatGPT-Bot gebeten wurde, Fragen aus den Prüfungen der sechsten Klasse in Singapur zu lösen, scheiterte er kläglich.
Während eines Experiments im Februar wurde ChatGPT von der singapurischen Nachrichtenagentur gefragt Die Straits Timeszur Beantwortung von Fragen aus derAbschlussprüfung Grundschule. Die PSLE ist eine Prüfung, die alle 12-Jährigen in Singapur ablegen müssen und bestimmt, auf welche weiterführende Schule sie gehen.
ChatGPT erhielt Fragen aus den Papieren der PSLE 2020, 2021 und 2022 zu Mathematik, Naturwissenschaften und Englisch.
Laut The Straits Times erzielte es durchschnittlich 16 von 100 Punkten für die drei Mathematikarbeiten, die es brauchte. Während des Tests konnte es keine Fragen verstehen oder beantworten, die sich auf Diagramme oder Grafiken bezogen, und erhielt für diese Fragen null Punkte.
Aber auch bei einfachen, textbasierten Fragen machte ChatGPT Fehler. Auf die Frage nach der Summe von 60.000, 5.000, 400 und 3 lautete die Antwort 65.503, berichtete die Straits Times.
Die richtige Antwort ist 65.403.
Als Insider jedoch dieselbe Frage stellte, war die Antwort von ChatGPT richtig.
Etwas besser schnitt ChatGPT bei den Science Papers ab und erhielt im Schnitt 21 von 100 Punkten.
Aber am Montag, als Insider ChatGPT auf zwei PSLE-Wissenschaftsfragen – eine aus dem Jahr 2020 und eine aus dem Jahr 2022 – testete, wurden beide Fragen richtig gestellt.
ChatGPT schaffte es, die Englischtests zu bestehen und erzielte durchschnittlich 11 von 20 Punkten in den drei eingereichten Arbeiten, berichtete The Straits Times. Während des Englischtests hatte ChatGPT noch Probleme – diesmal mit Fragen, die Wörter mit mehreren Bedeutungen enthielten.
Ein Beispiel, das die Straits Times zitierte, war das Wort „Wert“. ChatGPT missachtete den Kontext der Frage, in der sich „Wert“ auf die eigenen moralischen Prinzipien bezog, und antwortete, als ob es sich um Geldwert handeln würde.
ChatGPT wurde von OpenAI, einem Unternehmen für künstliche Intelligenz, entwickelt und im November eingeführt. Bis Ende Januar hatte es 100 Millionen Nutzer.
Die Unfähigkeit des Bots, die Prüfungen der sechsten Klasse in Singapur zu bestehen, ist überraschend – er schaffte es, eine Abschlussprüfung an der Wharton Business School zu bestehen, bestanden Prüfungen in vier juristischen Studiengängen, und problemlos eine US-medizinische Zulassungsprüfung bestanden.
Universitäten überarbeiten jetzt Untersuchungen wegen Bedenken, dass KI-Bots zum Schummeln verwendet werden könnten, The Das berichtete die New York Times im Januar.Dieser Dreh- und Angelpunkt beim Testen beinhaltet laut The Times mehr mündliche Prüfungen, Gruppenarbeit und handschriftliche Bewertungen anstelle von getippten Einreichungen.
Vertreter von OpenAI und des Bildungsministeriums in Singapur reagierten nicht sofort auf die Bitte von Insider um einen Kommentar.