MIT-Team entwickelt AI-Künstler für menschenähnliche Zeichnungen und Kollaboration.

Ein Team von MIT hat einen KI-Agenten namens SketchAgent entwickelt, der menschenähnliche Skizzen erstellen und interaktiv mit Menschen zusammenarbeiten kann. Die Forscher testeten das System in einem kollaborativen Zeichnungsumfeld, das auf der Web-Technologie basiert. Benutzer können mit SketchAgent zusammenarbeiten, um nach einer gegebenen Textbeschreibung ein erkennbares Konzeptbild zu zeichnen. Beispielsweise fanden die Tester heraus, dass das Entfernen von menschlichen Pinselstrichen, die die Maschine vorgeschlagen hat, die Endzeichnung verbessern kann. Eine gelöschte menschliche Pinselstriche kann dazu führen, dass die KI ein Bootsskizze besser erkennt. Benutzer können durch einfache Textbefehle die Pinselstriche des KI-Agents steuern. Grün zeigt die Striche des Benutzers, während rot die KI-Striche markiert. Benutzer können auch durch Textdialoge die Zeichnungen des Systems bearbeiten. Das Team demonstrierte verschiedene Konzeptskizzen des Systems, darunter Maschinen, Frösche, DNA-Doppelspiralen, Flussdiagramme und sogar phantastische Szenarien wie eine Schlossruine in einem Wüstenland. Zukünftig könnte dieses Tool für interaktive Kunstspiele genutzt werden, bei denen Lehrer und Forscher komplexe Konzepte veranschaulichen und Benutzer schneller lernen können. Tamar Rott Shaham, eine Koautorenin des Projekts, betonte, dass die Ergebnisse zeigen, dass die Art und Weise, wie das Modell visuelle Informationen verarbeitet, sich von anderen unterscheidet. Mit der Verbesserung der Fähigkeit des Modells, mehrere Modi zu verstehen, werden Benutzer in der Lage sein, kreativere und menschenähnlichere Ausdrucksformen zu erzielen. Dies könnte den Austausch und die Interaktion zwischen Menschen und KI erheblich verbessern. Obwohl SketchAgent eine beachtliche Leistung zeigt, kann es derzeit noch keine spezialisierten Objekte und komplexen Strukturen wie Symbole, Sätze oder Winkel vollständig zeichnen. Im kollaborativen Prozess ist das Modell manchmal verwirrt – beispielsweise zeichnete es einmal zwei Köpfe an einem Charakter. Vinker erklärt, dass dies möglicherweise auf die "Denkvernetzung" des Modells zurückzuführen ist, bei der es die Zeichnungsanweisungen in mehrere Schritte aufteilt und dabei möglicherweise Fehler macht, indem es verschiedene Teile der Skizze falsch interpretiert. Das System benötigt oft mehrere Anläufe, um menschenähnliche Skizzen zu erstellen. Die Zukunftsaussichten des Teams zielen darauf ab, den kollaborativen Zeichenprozess zu vereinfachen und die Interaktion mit unterschiedlichen Sprachmodellen zu verbessern. Der KI-Agent soll durch schrittweises Arbeiten und kontinuierliche Verbesserungen in der Lage sein, vielfältige Ideen und kreative Konzepte zu visualisieren, die letztendlich dem Benutzer eine größere Zufriedenheit bieten. Industrieexperten bewerten die Entwicklung von SketchAgent als einen wichtigen Schritt vorwärts in der Mensch-KI-Kooperation, insbesondere in kreativen Bereichen. MIT ist bekannt für seine fortschrittlichen Forschungen im Bereich Künstliche Intelligenz, und SketchAgent zeigt wieder einmal die Fähigkeiten des Instituts, innovative Technologien zu entwickeln, die die Grenzen zwischen Mensch und Maschine verschwimmen lassen. Die Fähigkeit, KI-Modelle zu lehren, wie sie menschenähnliche Skizzen erstellen, hat das Potenzial, die kreative Zusammenarbeit und die Anwendbarkeit von KI in Bildung und Kunst erheblich zu fördern.