Echte KI-Agenten und ihre Rolle in der Arbeitswelt

Die Welt der Künstlichen Intelligenz hat einen entscheidenden Wendepunkt erreicht: KI-Agenten sind nun in der Lage, ökonomisch relevante Arbeiten zu verrichten. In einem kürzlich durchgeführten Test von OpenAI wurden Experten aus verschiedenen Branchen gegen KI angetreten, um herauszufinden, wie gut die künstliche Intelligenz bei komplexen Aufgaben abschneidet.

Der Test von OpenAI

OpenAI hat einen innovativen Test entwickelt, der sich von den üblichen Benchmarks abhebt, die oft auf Mathematik oder Trivia basieren. Stattdessen wurden Experten mit durchschnittlich 14 Jahren Erfahrung in Bereichen wie Finanzen, Recht und Einzelhandel beauftragt, realistische Aufgaben zu entwerfen, die menschliche Experten vier bis sieben Stunden in Anspruch nehmen würden. Die Ergebnisse wurden von einer dritten Gruppe von Experten bewertet, die nicht wusste, ob die Antworten von der KI oder von Menschen stammten.

Obwohl die menschlichen Experten insgesamt gewannen, war der Unterschied in vielen Fällen marginal und variierte stark je nach Branche. Die Hauptursache für die Überlegenheit der Menschen lag nicht in Halluzinationen oder Fehlern der KI, sondern in der unzureichenden Formatierung der Ergebnisse und der genauen Befolgung von Anweisungen. Diese Bereiche zeigen jedoch eine rasche Verbesserung, was darauf hindeutet, dass zukünftige KI-Modelle möglicherweise menschliche Experten in diesen Tests übertreffen werden.

Die Grenzen der KI

Trotz dieser Fortschritte ist es wichtig zu betonen, dass KI nicht bereit ist, menschliche Arbeitsplätze zu ersetzen. Die gemessenen Fähigkeiten beziehen sich nicht auf ganze Berufe, sondern auf spezifische Aufgaben innerhalb dieser Berufe. Ein Professor beispielsweise hat nicht nur eine Aufgabe, sondern viele verschiedene, einschließlich Lehre, Forschung, Schreiben und administrative Tätigkeiten. Solange KI in ihren Fähigkeiten unregelmäßig bleibt und nicht die komplexen Interaktionen menschlicher Arbeit ersetzen kann, wird sie nicht in der Lage sein, ganze Berufe zu ersetzen.

Wertvolle Aufgaben für KI

Ein Bereich, in dem KI bereits jetzt einen erheblichen Wert bietet, ist die Reproduktionsforschung. In der akademischen Welt gibt es eine sogenannte „Replikationskrise“, bei der wichtige Ergebnisse sich als nicht reproduzierbar herausstellten. Forscher haben begonnen, ihre Daten bereitzustellen, um anderen zu ermöglichen, ihre Arbeiten zu überprüfen, doch dieser Prozess ist zeitaufwendig und kompliziert.

Mit dem neuen KI-Modell Claude konnte der Autor einen komplexen wirtschaftswissenschaftlichen Artikel analysieren und die Ergebnisse erfolgreich reproduzieren. Dies hätte manuell viele Stunden in Anspruch genommen. Die Möglichkeit, dass KI solche Aufgaben übernehmen kann, könnte die gesamte wissenschaftliche Forschung revolutionieren, indem sie die Überprüfung und Reproduktion von Ergebnissen beschleunigt.

Die Rolle von KI-Agenten

Generative KI hat vielen Menschen bereits bei Aufgaben geholfen, doch der Limit war stets der menschliche Benutzer. Die Vorstellung von autonomen KI-Agenten, die Aufgaben selbstständig planen und Werkzeuge nutzen können, schien lange Zeit weit entfernt. Neueste Entwicklungen zeigen jedoch, dass KI-Agenten in der Lage sind, viele Schritte autonom zu bewältigen und dabei auch Werkzeuge zu verwenden, ohne dass eine umfangreiche menschliche Intervention erforderlich ist.

Ein Beispiel für die Messung der Fähigkeiten von KI-Agenten ist der METR-Test, der die Länge der Aufgaben bewertet, die KI mit mindestens 50 % Genauigkeit allein bewältigen kann. Die Fortschritte von GPT-3 zu GPT-5 zeigen signifikante Verbesserungen in der Agentenarbeit.

Wirtschaftlich wertvolle Anwendungen von KI

Die Frage, wie KI in der Arbeitswelt eingesetzt werden sollte, ist entscheidend. Ein häufiges Risiko besteht darin, dass Unternehmen KI lediglich zur Kostensenkung einsetzen, anstatt die neuen Möglichkeiten zu nutzen, um die Arbeit zu transformieren. Ein weiteres Risiko ist die unreflektierte Nutzung von KI-Agenten, die dazu führen kann, dass wir in einer Flut von KI-generierten Inhalten ertrinken.

Ein Beispiel dafür ist die Erstellung von PowerPoint-Präsentationen, bei der KI-Agenten eine Vielzahl von Versionen generieren können, die möglicherweise nicht benötigt werden. Um dies zu vermeiden, sollten Experten mit KI zusammenarbeiten, indem sie Aufgaben an die KI delegieren und die Ergebnisse überprüfen. Dies könnte die Effizienz um 40 % steigern und die Kosten um 60 % senken, während die Kontrolle über die KI erhalten bleibt.

Fazit

KI-Agenten sind in der Lage, echte Arbeit zu leisten, und obwohl diese Arbeit noch begrenzt ist, wird ihr Wert zunehmend erkennbar. Die Technologie, die es ermöglicht, akademische Arbeiten in Minuten zu reproduzieren, kann auch dazu führen, dass wir mit überflüssigen Inhalten überschwemmt werden. Der Unterschied zwischen diesen beiden Zukunftsszenarien liegt nicht in der KI selbst, sondern in der Art und Weise, wie wir sie nutzen. Indem wir sorgfältig abwägen, was es wert ist, getan zu werden, können wir sicherstellen, dass diese Werkzeuge unsere Fähigkeiten erweitern und nicht nur unsere Produktivität steigern.

Quellenliste:

• Quelle: REAL AI AGENTS AND REAL WORK
• OpenAI Testdokument
• Aufgabensammlung von OpenAI
• Forschung zu KI-Agenten
• METR-Test