00:00:03: Piotre, wie oft hast du heute schon deine KI benutzt?

00:00:08: Das ist eine gute Frage.

00:00:09: Gar nicht!

00:00:09: Ich habe noch heute gar nicht KI benutzen.

00:00:11: Hast Du in den letzten Tagen die KI benutzst?

00:00:14: Ja...

00:00:16: Das klingt auch nicht sehr oft.

00:00:18: Also Studenten tun es viel häufiger als Du.

00:00:21: Sie tun es regelmäßig und eigentlich tun sie alle.

00:00:24: KI hat unseren Alltag gehackt.

00:00:28: Unseren eigentlich auch.

00:00:29: Du bist ja Ausnahme Aber die Studenten definitiv nicht.

00:00:36: Die beschäftigen sehr intensiv mit KI, es gibt heute quasi kein Studenten mehr der sich nicht der KI bedient wenn er arbeitet und auch... Und das ist das entscheidende Thema heute für uns!

00:00:50: Auch wenn's um notenträchtige Arbeiten geht greifen Studenten heute auf KI zurück.

00:01:01: Das ist meine Annahme.

00:01:03: Ich folge da Juval Harari, den kennst du den Autor?

00:01:06: Der hat ja die These inzwischen, dass die Menschen, die heute geboren werden... ...die Kinder, die Heute geboren sind im Jahre zwutausend sechsenzwanzig In ihrer Kindheit und Jugend auch wenn sie studieren mehr mit KI sich beschäftigen als mit Muttervater und den Geschwistern.

00:01:22: Also das ist eine interessante These.

00:01:24: aber klar KI is Alltag Und das ist unser Thema.

00:01:28: Die Frage bleibt Ja, was wird aus diesen Studenten?

00:01:33: Und

00:01:34: warum

00:01:35: versagen Studenten wenn man ihn irgendwann den Chatbot vielleicht wieder wegnimmt.

00:01:41: Genau das ist das Thema und vielleicht ganz kurz nochmal zur Einordnung vorab.

00:01:46: wir fassen das Thema ein bisschen enger und genau auf den Punkt den du jetzt als letztes erwähnt hast was passiert wenn man in den Chatbott wegnimmt.

00:01:54: Wir reden also nicht darüber, wie jetzt generative KI an der Uni angewendet werden kann.

00:01:59: Wo sie hilft?

00:01:59: Welche Vorteile sie bringt und so weiter.

00:02:01: Das können die KI-Firmen alles eigentlich besser erzählen als wir sondern... ...wir sprechen jetzt darüber was eigentlich passiert wenn die altbewährte Art Leistungen von Studenten zu prüfen Prüfungen Klausuren usw.

00:02:15: Hausarbeiten auf eine Technologie trifft, die das komplett aushebelt!

00:02:20: Das ist nämlich KI.

00:02:22: Die kann das nämlich alles alleine.

00:02:24: Und die Frage sich dahin natürlich anschließt, ist auch was kann man?

00:02:28: Welche Ideen gibt es?

00:02:29: Was kann man tun um dagegen anzugehen.

00:02:31: Genau und wir das sind Piotre Heller und ich Joachim Müller-Jung.

00:02:36: Wir sind beide Wissenschaftsredakteure in der FHZ und FAS und wir beschäftigen uns eben immer wieder mit diesem Thema.

00:02:44: Ja, und auch das Thema was wir jetzt heute haben Pjodra ist etwas der uns schon länger begleitet nur haben wir jetzt einen sehr interessanten Anlass um hier in dem Podcast einfach mal auch darüber zu sprechen.

00:02:56: und dass es die Erfahrung nämlich eines Ökonomie Professors von der Brown University eine der elite Universitäten in den USA da hat nämlich mal geschaut was passiert wenn ich meinen Studenten den Checkbot wegnehme Und die Ergebnisse kann man gerade überall im Netz lesen.

00:03:13: Da tobt das Netz quasi, die Menschen, die das gelesen und auch die Auswertungen gesehen haben, die waren erschüttert.

00:03:23: Was war da los?

00:03:24: Vielleicht erklärst du es uns noch mal.

00:03:25: Wir fangen am Anfang an.

00:03:26: Die Geschichte beginnt mit einem furchtbaren Ereignis.

00:03:29: Das war der Amok Lauf an der Brown University im letzten Dezember.

00:03:34: Der hat dieser Professor Roberto Serrano heißt er.

00:03:38: Der hat seinen Studenten mal ausnahmsweise erlaubt, die Prüfung in der Mitte des Semesters von zu Hause zu erledigen.

00:03:46: Das war eine ganz große Ausnahme.

00:03:47: Normalerweise müssten sie dafür in die Uni kommen und jetzt sollten sie eben auch Zuhause bleiben dürfen.

00:03:52: nach diesem Ereignis Daraufhin gab es nicht nur deutlich mehr Studenten, die sich für seinen Kurs eingetragen haben plötzlich also doppelt so viele als sonst Sondern die haben auch noch richtig gut abgeschnitten.

00:04:03: Die Durchschnittsnote War

00:04:07: Und das war besser als sonst?

00:04:09: Das war viel besser, als sonst.

00:04:11: Der Roberto Serrano hat das alles in einem Online-Bildungsmagazin erzählt, dieses Inside Higher Ed.

00:04:18: Wir verlinken es auch mal an den Show Notes diesen Artikel, der ist ganz interessant zu lesen und jedenfalls waren bisher so Ergebnisse von sixty bis höchstens achtzig Prozent.

00:04:29: So dass war üblich also deutlich weniger als bisher.

00:04:33: Und was noch hinzukommt, er hat diese Prüfung sogar noch schwerer gemacht als sonst.

00:04:37: Weil die Studenten jetzt zu Hause mehr Zeit für die Lösung hatten.

00:04:40: Ja und da liegt natürlich der Verdacht nahe dass die studenten tatsächlich KI Chatpots verwendet haben.

00:04:47: aber wie hat Serano das dann bewiesen?

00:04:51: Beweisen kommt es natürlich nicht.

00:04:53: wir kommen vielleicht später nochmal darauf warum man das eigentlich auch gar nicht beweisen kann Aber der hat Indizien gesammelt.

00:04:59: Die Antworten waren In dieser Arbeit.

00:05:02: die Antworten waren richtig, aber ganz untypisch.

00:05:04: Ein Beispiel hat er erklärt das war eine Aufgabe wo seine Studenten eben eine mathematische Aussage beweisen sollten und es war einer die man eigentlich direkt beweisen konnte sagt er eben.

00:05:16: Aber die meisten studenten haben einen Umweg gewählt über ein indirekten Beweis.

00:05:20: Das heißt also man nimmt erst mal den Gegenteil dieser Aussage an und dann beweist man dass das Gegenteils nicht stimmt und somit muss die Aussage stimmen.

00:05:27: Und das ist eine sehr untypsche Lösung was er gemacht hat.

00:05:32: Er hat Chet GPT die gleiche Aufgabe gegeben und siehe da, Chet GPD hat auch diese ungewöhnliche Lösung genommen also hat den gleichen Weg, den gleichen weggegangen wie die Studenten das natürlich die Vermutung nahe legt.

00:05:43: ja klar die haben Chett GPT benutzt aber

00:05:45: es ist trotzdem kein Beweis dass die studenten tatsächlich also wir sagen ein justizialer Beweis das die Studentin betrogen haben mit KI.

00:05:56: Aber genau das Dilemma, vor dem die Universitäten stehen zu beweisen auch.

00:06:00: Dass es wirklich Betrug vorliegt in so einem Fall ist kann man ja gar nicht.

00:06:05: Kann

00:06:05: man nicht beweisen und deswegen hat er auch gesagt Leute ich glaube ihr habt gemogelt aber ich kann's nicht beweise.

00:06:13: also machen wir es mal ganz anders Die zweite Prüfung als die letzte Prüfungen im Semester.

00:06:18: die findet wieder als Klausur an der Uni statt.

00:06:20: Und wenn die Ergebnisse jetzt in dieser Prüfung, die hier vor Ort wo ich euch beobachten kann.

00:06:27: Wenn sie ähnlich gut sind wie in dieser Zwischenprüfung sag' ich mal dann gelten beide.

00:06:33: wenn Sie viel schlechter sind liegt die Vermutung doch sehr nahe dass ihr ein Chatboard oder KI verwendet habt und dann gilt nur diese Abschlussprüfungen.

00:06:42: was ist dann passiert?

00:06:43: Ein Drittel ist erst mal gar nicht zu dieser Prüfung gekommen.

00:06:46: Die sind direkt aus diesem Kurs ausgestiegen und die meisten, die übrig geblieben sind haben viel schlechter abgeschnitten.

00:06:52: nur einer von... das waren knapp sechzig, die noch dabei waren.

00:06:58: Nur eine hat sich in der zweiten Prüfungen verbessert.

00:07:01: alle anderen haben sich verschlechtert und manche die vorher hundert Prozent hatten hatten danach ne glatte Null.

00:07:06: Der Schnitt sank von diesen Eingangs erwähnten, zu neunzig Prozent auf achtundvierzig Prozent.

00:07:13: Und der Witz hier ist, dass das deutlich schlechter war als in den Jahren zuvor.

00:07:19: Achtundvierzig Prozent ja!

00:07:20: Das an einer Elite-Universität, das natürlich fatal.

00:07:24: Aber da bleibt immer noch die Frage... der KI-Einsatz tatsächlich dazu?

00:07:31: oder kann er dazu führen bei vielen Studenten, dass sie dann – jetzt sage ich nicht dümmer – aber dass Sie zumindest schlechter abschneiden in so einer Prüfung.

00:07:39: Genau und Sie haben schlechter abgeschnitten als in den letzten Jahren, aber man kann natürlich nicht sagen das es der KI Einsatz schuld war.

00:07:44: vielleicht waren Sie einfach nicht so gut vorbereitet weil Sie die Zwischenprüfungen nicht an der Uni gemacht hatten und da die Möglichkeit hatten eben zu mogeln.

00:07:52: Vielleicht waren die Studenten, die sich sonst nicht in diesen Kurs eingeschrieben hätten.

00:07:56: Diejenigen, die so den Schnitt gedrückt haben.

00:07:58: Vielleicht war die Prüfung aber auch einfach schwerer als sonst?

00:08:00: Also das ist jetzt nur ein Fall an dem man eben diese Frage nicht beantworten kann.

00:08:05: Entscheidend ist natürlich dieser Riesenunterschied zu der ersten Prüfungen, die zu Hause gemacht werden konnte und der Roberto Serano hat dann entsprechend auch gesagt ich zitiere es bringe mal einen Zitat von ihm wir können uns keine Gesellschaft leisten in der ein großer Teil unserer besten jungen Denkermeintbetrug sei.

00:08:24: okay.

00:08:25: Das wird zu einer kaputten Gesellschaft, wir dürfen uns nicht dafür entscheiden, Idioten zu

00:08:31: werden.".

00:08:32: Ja und das ist natürlich ein starker Spruch ne?

00:08:34: Das weiß man wirklich etwas darüber wie verbreitet das Problem jetzt jenseits dieses Falles?

00:08:42: auch es dass Studenten wirklich KI für ihre Arbeit benutzen unter Umständen eben legal oder, sagen wir legitim?

00:08:50: Oder illegitim.

00:08:51: Genau das ist jetzt nämlich ein starker Spruch.

00:08:53: aber was ist dran?

00:08:54: haben wir uns überhaupt entschieden dafür Idioten zu werden oder waren das nur die hundert Leute in seinem Kurs?

00:08:59: ist schwer zu sagen.

00:09:01: ich habe jetzt mal geguckt wie man anfangen könnte, sich dem zu nähern.

00:09:04: Und du hast es schon erwähnt?

00:09:06: Es fängt schon damit an dass man KI-Text nicht einfach so erkennen kann.

00:09:10: Man kann jetzt also nicht einfach die Uni kann jetzt einfach nicht hergehen und sagen so wir scannen jetzt hier mit einem KI-Detektor die arbeiten unserer Studenten und dann können wir statistisch schon mal sagen wie viele hier KI eingesetzt haben.

00:09:23: zwar machen das einige aber Man soll sich darauf nicht verlassen, weil diese Systeme sind eben nicht nur nicht perfekt.

00:09:29: Die sind sehr fehleranfällig.

00:09:30: also gibt eine Studie von zwei tausend fünfundzwanzig die hat dieses System GPT zero mit Aufsätzen getestet.

00:09:36: mit so typischen Studenten aufsetzen siebzehn Prozent falsch positive das heißt echte Aufsätze die als KI-Aufsätze gewertet wurden.

00:09:44: und da ist natürlich schon mal vor wie furchtbar dass es für uns Studenten ist.

00:09:47: wenn du so ein system einsetzt beschuldigst den falsch.

00:09:50: Also das sowas kannst du eigentlich nicht verwenden.

00:09:52: Eine andere Studie hat gezeigt, solche Erkennungssysteme funktionieren mit alten Sprachmodellen besser als mit neuen.

00:09:58: Also das alte GPT fliegt eher auf was auch übrigens erwartbar ist denn Sprachmodelle werden ja mit dem Ziel gebaut die menschliche Sprache zu imitieren und wenn sie dabei immer besser werden wird es natürlich auch immer schwerer sie von echter menschlicher Sprache in menschlichen Texten unterscheiden.

00:10:17: Und was jetzt noch hinzukommt ist wir lesen so viele KI-Text mittlerweile und kommunizieren mit der KI, was weiß ich.

00:10:26: Dass dazu führt dass viele Menschen auch Studenten selbst wiederum KI ähnlich schreiben.

00:10:31: also die KI Texte nähern sich den menschlichen an die menschlich in den KI Texten.

00:10:34: es wird wahnsinnig schwer das zu unterscheiden.

00:10:37: dann kommt noch dieses Katzen Maus Spiel hinzu.

00:10:39: Es gibt wiederum Programme Die KI Textes so umschreiben dass sie von dem KI Erkennungssystem nicht erkannt werden.

00:10:45: Dann will ich zu guter Letzt vielleicht nochmal ein bisschen skurriles Ergebnis erzählen.

00:10:51: Da gab es, da hat Nature das Magazin.

00:10:54: Hat mal die amerikanische Unabhängigkeitserklärung durch so einen Detektor gejagt.

00:10:58: Das ist ein Text von siebzehnhundertsechsundsiebzig.

00:11:01: Zweihundertfünfzig Jahre alt dieses Jahr genau und das Ergebnis ist fünfundneunzig bis hundertprozent KI generiert.

00:11:10: Da kann natürlich der KI ... Da liegt's dir daneben?

00:11:13: Aber da kann sich natürlich daneben liegen, gut daneben legen weil Sie würde man jetzt sagen ganz profan einfach nicht darauf trainiert wurde, dass sie das gar nicht wissen konnte was wie damals die Sprache war.

00:11:26: Dieser Operations-Code des Menschen, die Sprach verändert sich ja auch mit der Zeit, mit den Jahrhunderten sowieso und das ist ja auch erkennbar, das ist erlesbar.

00:11:36: deswegen ist das schon schön, die Klassiker auch mal wiederzulesen.

00:11:39: Aber was ja Studenten da nicht mehr tun?

00:11:41: Sondern sie lassen sich dann die Zusammenfassungen von ChatGbt vorlesen und es ist in dem Operations-Code den wir verwenden durch unsere Sprache oder nicht in der alten Sprache.

00:11:50: also deswegen ist es so einfach, dass zu konsumieren.

00:11:52: Also du siehst ich habe das ein bisschen Verständnis dafür und finde das durchaus nachvollziehbar, dass man diese Mittel einsetzt.

00:12:01: aber was Du ja jetzt gesagt hast im Prinzip die Detektoren sind eigentlich zu ungenau um Schlüsse zu ziehen.

00:12:09: Was kann man da machen?

00:12:10: Muss man dann die Studenten befragen oder was?

00:12:14: Ja, der Befragungen sind praktisch das Mittel der Wahl.

00:12:17: Jetzt ist es so dass für Deutschland habe ich jetzt keine Befregungen zur Betrug gefunden.

00:12:23: Die sind auch schwer zu machen übrigens.

00:12:25: Es gibt aber aus Deutschland zumindest Zahlen zur Nutzung.

00:12:28: Gibt zum Beispiel eine Umfrage des Zentrums für Hochschulentwicklung.

00:12:31: Dreiundzwanzigtausend Studenten immerhin Wie viele davon haben noch keine KI benutzt für ihr Studium?

00:12:37: Jeder sechzehnte.

00:12:38: Also, fünfzehn von sechszehn nutzen das man kann sagen also eigentlich alle alle Verwendens wobei es auch doch Unterschiede zwischen den Disziplinen gibt.

00:12:47: erwartbare Unterschiede würde ich sagen mechatronik und so andere Ingenieurwissenschaften.

00:12:52: Ingenieursdisziplin nutzten sie am ehesten die Germanisten Am wenigsten.

00:12:56: so viel zum Thema.

00:12:57: Ich lasse mir ja die Klassiker in einfacher Sprache ausgeben Und es gibt andere Befragungen, die eben in so eine ganz ähnliche Richtung zeigen.

00:13:05: Aber eben nicht aus Deutschland.

00:13:09: zumindest keine Daten dazu wie vieles jetzt nutzen um Entprüfung zu betrügen.

00:13:13: Okay der Betrug ist nicht bekannt aber gibt es solche Daten aus anderen Ländern?

00:13:18: Es gibt aus dem Vereinigten Königreich.

00:13:20: da hat der Guardian eine ganz interessante Recherche gemacht.

00:13:23: mit einem Informationsfreiheitsgesetz sind sie an Daten gekommen.

00:13:27: zum Wintersemester Da gab es siebentausend Fälle im Vereinigten Königreich, wo Studenten erwischt wurden beim unerlaubten KI-Einsatz.

00:13:37: Das sind ungefähr fünf von tausend Studenten, also fünf Promille.

00:13:41: Klingt nach nicht viel aber das sind wirklich die, die erwiszt, wo's belegt wurde, was wir praktisch zugegeben haben oder wo die Beweislast so stark war und die eben auch bestraft wurden dafür.

00:13:52: Und dieser Wert allein hat sich in den letzten innerhalb von zwei Jahren schon verfünffacht.

00:13:57: Also da sieht man...da gibt´s einen Trend ein gewissen?

00:14:00: Dann gibt es eine wirklich sehr interessante Studie aus den USA.

00:14:03: Es ist relativ aktuell von Vorschein der University of California, die haben knapp hunderttausend Studenten aus zwanzig Universitäten befragt und die haben es ganz interessant gemacht.

00:14:14: sie können vielleicht mal kurz über die Methode reden.

00:14:17: Die haben die Studenten in zwei Gruppen aufgeteilt.

00:14:19: Die eine Gruppe hat drei unverfängliche Fragen zu KI bekommen, also da könnte so Aussagen waren das.

00:14:25: Einer könnte lauten ich erkläre meinen Kommilitonen wie KI funktioniert?

00:14:30: Okay ja solche drei Aussagen und die andere Gruppe bekommt auch diese drei Aussage aber zusätzlich noch eine verfängliche Aussage wie zum Beispiel Ich nutze KI um in der Prüfung zu betrügen.

00:14:43: Und jetzt sollten diese Studenten nur antworten, wie viele von diesen Aussagen korrekt sind.

00:14:50: Sie sollten nicht sagen, welche davon auf sie zutrifft und so lässt sich dann... Also die müssen praktisch den Betrug nicht zugeben aber so lässt es sich statistisch hinterher ermitteln, wie viel dieser Betrugs-Aussage dann auch zutrift.

00:15:05: Ergebnis lautet neun Prozent nutzen ist zum Betrügen wobei das Interessante auch hier ist.

00:15:13: Und statistisch gesehen muss man sagen, dass das praktisch die untere Grenze ist bei dieser Art von Auswertung.

00:15:18: Also mindestens neun.

00:15:20: Was ich sehr interessant fand war die Auswertungen nach Disziplinen und zwar gibt es da ein interessantes Muster.

00:15:31: Die Disziplin in denen betrogen wird sind nicht die Disziplingen wo KI am meisten verwendet wird.

00:15:37: Also in welchen Disziplinen wurde am meisten betrogen?

00:15:39: Das waren die Wirtschaftswissenschaften und so Kommunikation, Journalismus.

00:15:44: Und die waren aber bei der KI-Nutzung im Mittelfeld.

00:15:48: Dann gab es Informatiker, Mathematiker, die ganz viel KI verwenden für das Studium legitim.

00:15:54: Da waren auch die Betrugsfälle relativ gering.

00:15:59: Wir wissen jetzt ... Die Studenten einmal nutzen KI.

00:16:04: Ja!

00:16:05: Einige nutzen's auch... zum Betrügeln, aber man kann es schwer nachweisen.

00:16:11: Schon gar nicht im Lehralltag kann man's ja eigentlich nicht nachweisen!

00:16:16: Jetzt ist natürlich die Frage wie geht man damit um?

00:16:19: Wir wollen die Studenten zum Denken bringen.

00:16:20: Die Dozenten wollen sie zum Denkenden bringen... ...die Gesellschaft braucht denkende Studenten und reflektierende Studentinnen.

00:16:29: also muss man ja etwas finden um diese Lehre trotzdem gebraucht wird.

00:16:39: Man sagt ja nicht die Professoren abschaffen und durch KI sie ersetzen, sondern man sagt wir brauchen die Professuren!

00:16:46: Wir brauchen die Universitäten, wir brauchen Institutionen aber wir brauchen sie offenbar inklusive KI in Zukunft.

00:16:55: also die Frage ist jetzt für mich erschüttert das denn eigentlich?

00:17:00: Die Lehre wenn wir sagen Studenten können damit betrügen Sie nutzen sie zum allergrößten Teil inzwischen auch?

00:17:07: Ja gut, erschüttert das die Lehre.

00:17:09: Da ist natürlich die Frage wie wichtig ist Prüfung in der Lehre und wie zentral ist es?

00:17:14: Man kann zumindest sagen dass es nicht so weiter funktionieren wird wie bisher.

00:17:21: Das kann man sagen.

00:17:22: Wie soll man das dann machen?

00:17:24: Ja gut!

00:17:25: Um die Frage zu beantworten müsste man vielleicht mal fragen wofür prüfen wir überhaupt?

00:17:29: ja Wofür gibt es Prüfungen an der Uni?

00:17:31: Und klar Es ist natürlich eine Art Zertifizierung dass man etwas gelernt hat und das wird überprüft.

00:17:41: Und dann hat man eine Art Zertifikat.

00:17:43: Jetzt ist natürlich die Frage, was ist überhaupt noch wert diese Zertifikierung?

00:17:49: Wenn das, was abgefragt wird etwas ist, was eine KI auch übernehmen kann.

00:17:53: Ja und dann müsste man sich überlegen ob man nicht die Fragen beim Abfragen quasi, ob man die modifiziert?

00:17:59: Ob man nicht gewissermaßen mit ins Kalkül nimmt dass hier KI benutzt wird und dass man die Frage dann so stellt, dass der Denkprozess, der Reflexionsprozess des Studenten zum Beispiel verschriftlich wird.

00:18:13: Verschriftlich werden muss in den Prüfungen, dass man die einzelnen Schritte einer Lösung quasi aufschreibt und nicht das Ergebnis wie die GKI das macht sondern die Schritte auch aufschreiben.

00:18:24: also kann man diesen Denkprozess nicht vielleicht möglicherweise dokumentieren?

00:18:28: Ja das wäre natürlich eine eine mögliche Lösung.

00:18:31: ja ich documentiere den Denk Prozess.

00:18:34: Das ist so Zwischenschritte.

00:18:35: man muss Entscheidungen man muss auch die Öhtümer die dabei waren Dokumentieren.

00:18:40: oder was man auch machen könnte ist natürlich, ich erlaube die KI-Verwendung und muss sie transparent machen.

00:18:48: Und soll dann praktisch die KI Antwort kritisieren, erklären wo sie falsch legt?

00:18:54: Der Haken hier... Also ich finde hier gibt es zwei Haken an der ganzen Sache.

00:18:58: Der eine ist sehr aufwändig.

00:19:01: Ich muss natürlich also wenn nicht nur das Ergebnis sondern auch praktisch diesen Denkprozess dokumentieren und bewerten soll, muss man sich da reinlesen.

00:19:10: Und der zweite ist, es ist auch nicht so wirklich KI sicher.

00:19:14: Weil ich den Denkprozess auch von einer KI mir formulieren lassen kann?

00:19:19: Also ich kann sagen okay gut, formulier mir das Ergebnis.

00:19:22: und dann sage ich, formuliere mir wie ein Student formulieren würde, wie er darauf gekommen ist.

00:19:27: also es ist nicht hundertprozentig KI sicher!

00:19:29: Ich finde man sollte schon eher an Aufgaben denken... Mir fällt jetzt spontan nichts ein.

00:19:35: aber die In dem Sinne KI sicher sind, dass ich wirklich weiß okay eine KI wird das nicht beantworten können zufriedenstellend.

00:19:42: Dass man muss vielleicht einen persönlichen Bezug zu irgendwas darstellen müssen.

00:19:47: Weiß sich nicht!

00:19:48: Es gibt noch zwei andere Lösungen praktisch die man immer wieder liest.

00:19:52: Die andere ist natürlich Man macht nur noch Dinge die man entweder im eins-zu-eins Gespräch oder vor Ort an der Uni lösen kann.

00:20:01: Anwesenheitspflicht quasi

00:20:03: ne?

00:20:04: Wobei Experten da auch sagen, das muss man sich nicht viel darüber nachdenken.

00:20:10: Das muss man sehr selektiv einsetzen.

00:20:14: Es gibt praktisch viele Kompetenzen die man braucht als Student, als jemand der später Akademiker, also der keiner sein will.

00:20:22: Die kann in einem Prüfungsaal gar nichts zeigen.

00:20:24: Als Beispiel ein Ingenieur, der kann vielleicht neunzig Minuten ohne Hilfsmittel eine Brücke entwerfen aber das entspricht ja nicht der Arbeitsweise eines Ingenieurs.

00:20:35: Genau so ein Journalist, der, wenn er jetzt irgendwo sitzt, schreibt nicht einen Text ohne Recherche.

00:20:40: Und das ist praktisch das was man eben nicht in einem Prüfungssaal abbilden kann.

00:20:44: und die andere Sache ist, man könnte praktisch... Man müsste jetzt, das muss man so fachspezifisch gucken sehr genau schauen was es erlaubt und was nicht und versuchen das zu unterscheiden und dann den KI Einsatz entsprechend erlauben.

00:21:00: also wenn wir jetzt an Informatik denken

00:21:03: gut

00:21:04: Die KI darf nicht das fertige Design von einem Programm übernehmen, aber die darf beim Debugging und vom Code helfen.

00:21:12: Aber es ist eben nicht bei dem Entwurf der Architektur dahinter.

00:21:15: oder KI-generierten Texte müssen eben als solche kenntlich gemacht werden.

00:21:19: wie ein Zitat Ja?

00:21:21: Das ist jetzt auch so eine Sache.

00:21:23: ich finde dass öffnet mit Tür.

00:21:25: Da wird man aber auch wieder fragen müssen okay gut Wie überprüfe ich das jetzt genau?

00:21:30: Ja da sind natürlich alles ganz ganz wichtige Fragen die jetzt sich alle Universitäten, alle Fachhochschulen im Prinzip auch alle Schulen auch stellen müssen.

00:21:40: Die Fragen die wir jetzt quasi formuliert haben, die du auch skizziert hast, die Lösung scheint mir werden nicht einfach sein.

00:21:49: also ich mache die Erfahrungen auch mit dem Universitätsrat in Heidelberg und da ist das ein ganz großes Thema und zwar innerhalb kürzester Zeit geworden, ne?

00:21:56: Die Frage wie damit umgehen und es gibt ja auch Reflexion innerhalb der Hochschul-Szene.

00:22:03: Also ich habe vor kurzem ein Artikel bei uns auch in der FHZ erschienen, zwei Literaturwissenschaftler die einen Artikel geschrieben haben, der dann die Überschrift erhalten hat.

00:22:13: den werden wir natürlich auch verlinken.

00:22:15: Maßnahmen gegen die kognitive Kapitulationen.

00:22:19: Im Umgang mit KI herrscht an den hoch schon weiter große Unsicherheit ganz offensichtlich.

00:22:23: Und jetzt fordern diese beiden Literaturwissenschaftler dringend einheitliche Rahmenbedingungen, gibt es so was?

00:22:31: Gibt es Ansätze dafür, weißt du etwas darüber?

00:22:33: Ja

00:22:34: also einheitlich nicht.

00:22:35: und Universitäten haben natürlich ihre Leitlinien in denen auch jetzt KI auftaucht.

00:22:40: Ich weiß nicht, was ich davon halten soll.

00:22:42: Aber in welche Richtung die sich entwickeln?

00:22:45: Es gibt einen Leitlinien-Check.

00:22:48: Das Hochschulforum Digitalisierung bringt den raus und haben sich diese KI-Leitlinie angeschaut von deutschen Hochschulen und verglichen mit dem, das vor zwei Jahren war.

00:23:02: Aktuell ist es im Mai rausgekommen und vor zwei Jahre gab's das schon mal ... Ich glaube, das spiegelt eine gesellschaftliche Entwicklung wieder.

00:23:09: Die entwickeln sich so von Verbotskatalogen also was man alles nicht darf.

00:23:13: hinzu ist formulierend dieses Enabling Dokumenten.

00:23:16: Also wie kann ich praktisch die KI-Nutzung ermöglichen an der Universität?

00:23:21: und was heißt es fürs Prüfungswesen?

00:23:23: Das geht ein bisschen weg von einer Kontrolllogik.

00:23:25: Also das ist jetzt praktisch so zusammengefasst, verschiedene Leitlinien.

00:23:29: Die gehen eher weg von Kontrolllogiken.

00:23:32: also wie überprüfe ich jetzt ob der KI eingesetzt wurde hin zu einer stärkeren Gestaltung von Prüfungsformaten die eben KI irgendwie zulassen.

00:23:43: Das Prüfungdesign soll angepasst werden durch etwas was du erwähnt hast, also prozessorientierte Bewertungen.

00:23:50: Das heißt Ich bewerte den Prozess wie der Student jetzt eben dazu gekommen ist.

00:23:54: Die transferorientierte Aufgaben und eben auch, also transferorientiert heißt dann praktisch ich bewerte die Übertragung eines Gedankens auf ein anderes Feld und letztlich auch ergänzende mögliche mündliche Prüfungsanteile.

00:24:10: Also das soll es nicht komplett übernehmen.

00:24:12: Das finde ich eigentlich auch einen ganz interessanten Ansatz.

00:24:14: Man macht die Prüfungen ähnlich wie bisher Und in einer ergänzenen mündlichen Prüfung guckt man ob da wirklich auch was dahinter steckt

00:24:22: was ja im Abitur ja auch schon zum Teil gemacht wird, wenn dann die Noten auseinanderklaffen.

00:24:28: Die Eingereichte und dann die Prüfung, dass man dann noch mal so eine mündliche Prüfungen machen kann um wirklich zu prüfen ist das denn... Ist der wirklich so desolat oder war das vielleicht die Prüfungssituation?

00:24:41: Also ich finde es sind auch alles gute Vorschläge, die da jetzt kommen.

00:24:44: aber es gibt keine Einheitlichkeit und das zeigt natürlich schon ein bisschen Das Problem.

00:24:50: Wir haben ja diese Situation auch im Journalismus, die der Ruf nach einem einheitlichen, vernünftigen Umgang mit KI kommt von allen Seiten.

00:25:01: Der kommt an uns und wird dann uns herangetragen denn tragen wir auch innerhalb unseres Berufs hin und her.

00:25:07: und so ist es eben auch in den Hochschulen.

00:25:09: und bei uns ist ja auch das Problem dass möglicherweise Vertrauensverluste erleiden müssen, wenn das in die falsche Richtung läuft.

00:25:18: Das ist eben diese Verantwortung, die dann Universitäten haben, die Institutionen haben auch die Professoren haben Verantwortung einerseits für die Studenten, aber auch für die Richtigkeit der Prüfung.

00:25:30: Sprich für das Ergebnis am Ende dieser pädagogischen didaktischen Übung dass man nämlich wirklich einen Student hat, der auch wirklich selbstständig arbeiten kann, der selbstständige Denken und reflektieren kann.

00:25:44: Ich finde diesen Begriff kognitive Kapitulation ganz wichtig.

00:25:47: da muss entgegen gearbeitet werden und da muss natürlich einiges passieren.

00:25:51: Ja, ich finde nur... Zum einen zur Einheitlichkeit.

00:25:56: Ich glaube sowas kann nicht deutschlandweit oder universitätsweit noch nicht mehr einheitlich sein.

00:26:02: Das zeigt mir eben diese Umfrage in den USA die deutlich gemacht hat Es unterscheidet sich stark zwischen Disziplinen wie betrogen wird wo betrogen und auch wie KI eingesetzt wird.

00:26:12: Und ich glaube auch so.. Ich kann nicht ähnliche Prüfungen KI sicher für Germanisten und für Informatiker gestalten.

00:26:18: Also es müsste eher so fach Also disziplinweit, würde ich mal sagen.

00:26:23: Müsste man sowas eher denken?

00:26:25: Und das zweite Problem ist – was ich sehe und das ist wirklich die größte Herausforderung von der wir jetzt stehen – ja okay!

00:26:34: Ich kann mir schon eine Art Prüfung ausdenken.

00:26:37: wenn ich aber überhaupt….

00:26:38: ich muss dafür vorher aber wissen, was will ich überhaupt

00:26:40: prüfen?!

00:26:41: Du sagst logisches Denken, Gedankenbilden usw.. Das Problem ist, dass KI gerade das abnimmt.

00:26:48: Natürlich will ich Leute die Logist denken können, die ein Argument aufbauen und praktisch einen Konzept erarbeiten können... Aber wenn KI gerade das abnehmen kann oder zumindest verspricht, abzunehmen.

00:27:01: Ist es dann überhaupt noch das was ich abfragen will in der Prüfung?

00:27:04: Oder sind ganz andere Dinge über die wir uns jetzt noch gar keine Gedanken machen?

00:27:08: und da will ich jetzt auch gar nicht irgendwie kommen mit KI-Kompetenz und irgendwie die Ergebnisse der KI kritisch hinterfragen?

00:27:14: weil meine Meinung ist schon viel zu weit gegriffen.

00:27:17: man müsste viel früher ansetzen und vielleicht nochmal Ja, so eine Grundsatzfrage stellen.

00:27:23: Wofür will ich KI überhaupt einsetzen?

00:27:25: Wo nützt sie mir und wo schadet sie mir letztlich auch wenn Sie oberflächlich meine Arbeit vereinfacht?

00:27:31: Ich habe ja den Verdacht, wenn ich ehrlich bin, Piotre dass wir das viele das noch gar nicht ahnen wie viel wie nützlich KI sein kann, also zu welchen Zwecken man KI inzwischen einsetzen

00:27:43: kann.

00:27:43: Also ich verfolge das bei Claude ist ein schönes Beispiel.

00:27:46: Das Claude kann nicht nur schreiben, das kann so viel mehr als schreiben.

00:27:49: viele benutzen es nur zum Schreiben und das ist einfach so.

00:27:54: diese KIs können immer mehr und das ist noch gar nicht bei einem Großteil noch gar nichts angekommen.

00:27:59: Im Lehrbetrieb wahrscheinlich schon, allerdings glaube ich auch da dass die das Potenzial auch noch nicht ausgeschöpft haben.

00:28:05: Das auch da wie bei uns dann nämlich unseren Berufsstand ja quasi mit hinein.

00:28:12: wir haben doch gar nicht die mögliche Zeit um diese ganzen KI-Varianten und Möglichkeiten Potenziale daraus zu loten.

00:28:20: Da könnte man viel viel erreichen, aber man kann wahrscheinlich auch ganz schnell große Augen kriegen und denken wow.

00:28:28: Das ist ja... Und wenn das so isst dann glaube ich dann wird das Problem eher noch größer.

00:28:34: die Frage wie wir damit umzugehen haben vernünftige gute vor allem dann konsensuelle Lösungen zu schaffen also mit denen wirklich alle Einverstanden sein können so Standard zu errichten.

00:28:44: Aber wie du sagst das siehst du wahrscheinlich gar nicht.

00:28:46: das muss fächerspezifisch sein.

00:28:49: Ja, wir müssen leider den Schluss machen heute.

00:28:51: Aber ich glaube wie ... Mein Verdacht Piotr, ich weiß nicht wie es dir geht aber du bist ja der Insider hier.

00:28:57: Mein Verdicht ist das Thema wird uns dann noch mal beschrieben und dann hoffentlich mit Lösungen.

00:29:02: Dann, ich glaube, das nächste muss dann sein sich die Lösung auch anzugucken.

00:29:06: Vielleicht ein

00:29:07: guter Punkt, ja.

00:29:08: Aber die Befürchtung, dass das uns weiter beschäftigt, die Theilich?

00:29:14: So, und dann würde ich sagen, machen wir jemand Strutsch drunter für heute!

00:29:17: Wir machen's wie was gerne tun an dieser Stelle Ein Blick voraus, ein Blick ins Blatt.

00:29:22: Nämlich in das völlig KI-freie Wissenschaftsblatt der Sonntagszeitung.

00:29:29: Wir haben drei Themen?

00:29:30: Ja genau!

00:29:31: Als Aufmacher ist von meiner Kollegin Liv Schröder.

00:29:35: es geht um Empathie wie man sie steigert was sie überhaupt bringt.

00:29:39: auf der Doppelseite schreibt Pia Heinemann über Mücken.

00:29:42: um genau zu sein... Der Anlass ist eigentlich ganz interessanter.

00:29:46: weißt du dass mitgekriegt hast?

00:29:48: Das war diese Google-Aktion, die in den Vereinigten Staaten, ich glaube in Kalifornien, zigtausende Mücken aussetzen praktisch.

00:29:56: Die sich aber nicht vermehren können und damit wollen sie dann auch nicht stechen.

00:30:00: Und damit wollen Sie praktisch die Mückenpopulation kontrollieren?

00:30:03: Und Pierre Heinemann stellt die Frage, brauchen wir das auch?

00:30:06: Brauchen wir eine

00:30:07: Mückenpolizei?".

00:30:15: Da geht sich der Frage nach, guckst du erst mal auf das erste halb Jahr zurück?

00:30:18: Auf die Stromproduktion.

00:30:19: Da haben wir immer diese Debatte mit erneuerbaren Energien und vor allem jetzt in dem Fall mit dem Solarstrom.

00:30:26: Und da guckt sie wie die Situation in Deutschland war im ersten Halbjahr.

00:30:31: Ja wunderbare Themen auch, auf die man gerne reagieren kann.

00:30:36: also wenn ihr Anregungen habt zu den Themen aber eben KI-Thema von heute.

00:30:46: Betrügende Studenten, man sagt so ungern, betrügende Studenten weil sie müssen ja auch hart arbeiten... Absolut!

00:30:53: ...betrügene Studenten wenn Sie eine Meinung haben, wenn Sie einen Kommentar oder natürlich auch andere Anregungen haben dann gerne eine Mail an Wissenschaft at FAZ.de.

00:31:04: Stichwort wie immer Podcast und ich glaube damit verabschieden wir uns für heute.

00:31:09: Tschüss.

00:31:10: Tschüss danke fürs Zuhören.