Kann eine KI die Arbeit unserer NFS-Forschenden veranschaulichen?
Ein Bild sagt mehr als tausend Worte… auch wenn es von künstlicher Intelligenz (KI) erzeugt wurde? Das wollten Forschende des Nationalen Forschungsschwerpunkts (NFS) Evolving Language mit dem Projekt “My work pictured by AI” herausfinden. Die Reise war nicht so einfach, wie es scheint, denn einige Wörter sind zu technisch für den Bot, während andere auf eine bestimmte Definition festgelegt sind. Aber nach sehr vielen KI-Prompt Wiederholungen (Prompt = Aufforderung) sind die Ergebnisse nun da! Sie können sie hier finden.
Der NFS Evolving Language hat den MidJourney-Bot – eine KI, die auf der Grundlage eines Textes Bilder zu generieren kann– gebeten, die Arbeit von rund 30 seiner Forschenden zu illustrieren. “Wir geben dem Bot eine Aufforderung – also eine Anweisung – auf der Grundlage des Titels und des Abstracts der Forschungsarbeiten sowie eines künstlerischen Stils und wählen dann die besten von der KI generierten Ergebnisse aus“, erklärt Celia Lazzarotto vom NFS-Kommunikationsbüro, verantwortlich für das Projekt. Die Forschenden hatten dabei ein Mitspracherecht und konnten aus den Vorschlägen denjenigen auswählen, der ihnen am besten gefiel. Die Endresultate sind ab heute auf der Website des NFS verfügbar, jeweils begleitet von einem Text, der das Projekt des Forschenden beschreibt. Jetzt kann jeder selbst beurteilen ob, die KI gut erfasst hat, woran unsere Forschenden arbeiten.
Die hohe Kunst, Forschung zugänglich zu machen
Das eigene Forschungsprojekt zu erklären, kann schwierig sein, vor allem, wenn man es mit einem Laienpublikum oder einem Kollegen aus einem anderen Bereich zu tun hat. Mit diesem Projekt hofft der NFS Evolving Language, seine Forschung einem breiten Publikum bekannt zu machen. Gibt es einen besseren Weg, um die Vielfalt dieses nationalen Konsortiums zu zeigen? “Was unsere Forscherinnen und Forscher tun, sollte auch von Laien besser verstanden werden, und die Lancierung von solchen Ideen ist ein innovativer und kreativer Weg, um die Wissenschaft einem Laienpublikum näher zu bringen“, sagt Emilie Wyss, Leiterin der Kommunikation des NFS Evolving Language. “Ausserdem mussten die Forschenden einen einfachen Text verfassen, in dem sie ihre Forschenden vorstellen, was eine gute Übung für sie ist.“
Die Kunst des Promptens beherrschen
“Obwohl der Midjourney-Bot benutzerfreundlich ist, war es nicht immer einfach, die KI dazu zu bringen, “Kunst” zu schaffen, die sowohl ästhetisch ansprechend als auch repräsentativ für die Arbeit und die Bedürfnisse des Forschenden ist“, erzählt Celia. In der Tat kann der Bot auf einige Aufforderungen unerwartete Antworten geben.
Erstens sind einige Wörter, wie z. B. Fötus, verboten, so dass der Titel bestimmter Arbeiten durch ein Synonym geändert werden musste. “Dadurch wird die Abbildung nicht genau der Arbeit des Forschers gerecht, aber es gibt keine andere Möglichkeit“. In diesem Beispiel musste das Wort “Fötus” durch “Embryo” ersetzt werden, was nicht dasselbe Wachstumsstadium widerspiegelt und daher nicht ganz korrekt ist.
Ein weiteres Problem besteht darin, dass sich die KI bestimmte Wörter – wie zweisprachig, Vokallernen, Semantik oder Gehirnnetzwerke – nicht sehr gut vorstellen kann, so dass sie in den Kreationen oft fehlen. “Es gibt nur wenige visuelle Darstellungen dieser Konzepte, so dass es auch für Menschen schwierig wäre, sie darzustellen. Hier müssen wir dem Bot ein wenig helfen“, verrät Celia. Um sie darzustellen, müssen sie künstlich hinzugefügt werden, indem man die Eingabeaufforderung mit Wörtern wie international, Länder… versieht.
Andererseits sind manche Wörter extrem einseitig und führen dazu, dass die Bilder ähnlich aussehen: Wenn man den Begriff “Beziehung” in einem Prompt verwendet – auch wenn er sich nicht auf ein Paar bezieht -, sieht man in den meisten Fällen zwei Protagonisten, die sich gegenüberstehen. Es ist am besten, den Begriff umzuformulieren, um seine Verwendung zu vermeiden, wenn mehr Vielfalt in den Bildern gewünscht ist. Die Formulierung “im Stil von Rene Magritte” ist ebenfalls sehr schwer zu kontrollieren und führt fast immer zu einem Bild einer Person mit einem Vogel im Gesicht, unabhängig davon, wie der Rest der Aufforderung lautet. “Um dies zu umgehen, habe ich ein Bild eines anderen, weniger berühmten Gemäldes des Künstlers zur Aufforderung hinzugefügt oder zuerst den Inhalt des Bildes erstellt und dann einen Kunststil angewendet“, erzählt Celia.
Auf einer leeren Leinwand beginnen
Das Projekt “My work pictured by AI” ist einem Projekt des Schweizerischen Zentrums für Affektive Wissenschaften (CISA) nachempfunden. Die Idee begann im Juli 2022 mit Dr. Ben Meuleman, permanent Statistiker des Zentrums mit einem Hintergrund in Psychologie und Statistik. “Zuerst war es ein Nebenprojekt. Ein paar Leute kamen zu mir, um ihre Doktorarbeit mit dem Midjourney-Bot zu illustrieren“, erinnert er sich. Dann nahm das Projekt unter der Leitung von Carole Varone, Leiterin der Kommunikationsabteilung des CISA, einen größeren Umfang an. Ben unterstreicht den Einfluss der persönlichen Anregung auf das Endergebnis: “Wir wählen die Schlüsselbegriffe, den spezifischen Stil, was gut aussieht… In diesem Sinne geht es nicht nur darum, was die KI von der Arbeit versteht, sondern auch um den Prompter“. Er versuchte, seinen Einfluss auf die Bilder so gering wie möglich zu halten, indem er den Titel beibehielt und nur selten Elemente erzwang.
Die Kunst Projekte werden an verschiedenen Orten ausgestellt.