At a glance
Studien von Stanford, MIT und BCG zeigen, wann manuelle Arbeit KI-unterstützte Ergebnisse übertrifft und wann hybride Teams beide überbieten. Hier erfahren Sie, wie Sie die richtige Vorgehensweise wählen.
Das Tool lieferte in weniger als vier Minuten neun Seiten - eine Zeitleiste, einen Nachrichtenplan und eine Risikomatrix, die aus Zahlen gebaut wurde, die das Modell erfunden hatte.
Jedes Team steht nun vor dem gleichen Dial. Setzen Sie es auf manuell und Sie lassen Geschwindigkeit auf dem Tisch. Setzen Sie es auf volle KI und Sie erben fließende Unsinn als fertige Arbeit verkleidet. Setzen Sie es auf Hybrid und Sie erreichen die wahre Frage: Welche Schritte gehen zur Maschine, und wer überprüft was?
Die Beweise aus kontrollierten Studien, anstatt Anbieter-Benchmarks, zeigen eine Richtung. Für die meisten Wissensarbeiten schlägt ein hybrider Ansatz - eine menschliche Steuerung, während KI das wiederholende Medium ausführt - sowohl reine manuelle als auch reine Automatisierung.
Die Basisraten hinter dem Marketing
In einer randomisierten Studie von 95 professionellen Programmierern beendeten Entwickler mit GitHub Copilot eine Codierungsaufgabe 55.8 Prozent schneller als eine Kontrollgruppe. Eine separate randomisierte Studie von 4.867 Entwicklern in Microsoft, Accenture und anderen großen Arbeitgebern fand heraus, dass Copilot-Benutzer 26 Prozent mehr Pull-Anfragen pro Woche abgeschlossen haben.
Bei einem komplexen Strategieproblem, das nur außerhalb dieser Grenze zu sitzen gewählt wurde, waren dieselben Berater 19 Prozentpunkte weniger wahrscheinlich, die richtige Lösung zu erreichen als Kollegen ohne KI überhaupt.
Generative AI beschreibt Systeme – große Sprachmodelle, oder LLMs, die wichtigsten unter ihnen –, die Text, Code und andere Inhalte aus einem Anruf erzeugen. Ein LLM prognostiziert das plausibelste nächste Token, weshalb es auch wenn es falsch ist, autoritativ klingt.
Ein Entwickler, den ich Sam nennen werde, hat dies auf einer reifen Codebasis gelernt. Er erwartete von einem AI-Coding-Assistent eine Beschleunigung von 24 Prozent; seine Stopwatch zeigte das Gegenteil. In einer randomisierten Studie von 2025 durch die gemeinnützige METR nahmen 16 erfahrene Open-Source-Entwickler über 246 echte Aufgaben 19 Prozent länger mit AI als ohne, auch wenn sie glaubten, dass das Tool sie um 20 Prozent schneller gemacht hatte. Drei Viertel der Teilnehmer waren einzeln langsamer.
Eine Studie mit 5.179 Kundensupportagenten bei einem Fortune 500-Softwareunternehmen ergab, dass ein AI-Chat-Assistent die Produktivität durchschnittlich um etwa 14 Prozent steigert, wobei die Gewinne bei neuen Einstellungen konzentriert sind.Ein zweimonatiger Agent, der das Tool benutzte, funktionierte wie ein sechsmonatiger Agent ohne es.Erfahrene Mitarbeiter sahen wenig Nutzen, weil die Vorschläge meist wiederholten, was sie bereits wussten.
Paare diese zusammen und die Basisrate sieht so aus: KI-unterstützte Arbeit beschleunigt zuverlässig wiederkehrende, gut definierte Aufgaben, die in Volumen produziert werden, vor allem für weniger erfahrene Menschen, und es verlangsamt zuverlässig neue oder zweideutige Arbeiten mit schwerem Kontext, vor allem für Experten, die bereits die Antwort kennen und die Version der Maschine überprüfen müssen.
Was vollständige Automatisierung wirklich kostet
Autonome Agenten sind der verführerische nächste Schritt: Übergeben Sie die gesamte Aufgabe an einen KI-Agenten und lassen Sie ihn durch den Workflow klicken. Eine Studie von Stanford und Carnegie Mellon im Jahr 2025 verglich 48 professionelle Mitarbeiter mit vier führenden Agentrahmen auf 16 realistischen, mehrstufigen Aufgaben, die aus der Arbeit stammen, die ungefähr 72 Prozent der computerbasierten Berufe in den Vereinigten Staaten abdecken.
Agenten erreichten 32,5 bis 49,5 Prozentpunkte weniger als Menschen, die alleine arbeiteten, und die Fehlerquote bei Datenanalyseaufgaben erreichte 37,5 Prozent.Wenn ein Agent eine Zahl aus einem Quittungsbild nicht lesen konnte, erfand er manchmal eine plausible Zahl.Wenn er eine gelieferte PDF nicht analysieren konnte, holte er leise ein anderes Dokument aus dem Web.Das vollständige Papier auf arXivDokumente-Agenten ersetzen nicht autorisierte Quellen und Daten herstellen, anstatt einen Schritt fehlgeschlagen zugeben.
Die Übertragung eines gesamten Workflows an einen Agent verlangsamte die Arbeit um 17,7 Prozent, sobald Verifizierung und Debugging gezählt wurden, während die Erhöhung eines menschlichen Workflows mit KI in bestimmten Schritten es um 24,3 Prozent beschleunigte.
Der Ausfallmodus war Delegation ohne Checkpoints - eine menschliche Genehmigung am Ende eines Prozesses, den sie nicht beobachteten, und ererbte Fehler, die sie dann eins nach dem anderen auditieren mussten.
Photo by Brett Jordan on Unsplash
Wenn das Handbuch immer noch gewinnt
Halluzination ist der Begriff für eine KI-Ausgabe, die fließend und plausibel, aber falsch ist. Es ist kein seltener Randfall. Der jüngste Stanford AI Index, der 26 führende Modelle auf einem Factuality-Benchmark gemessen hat, fand Halluzinations- und Fehlerraten zwischen 22 und 94 Prozent je nach Modell und Aufgabe. Die besten Systeme sitzen in den niedrigen einzelnen Ziffern auf der zugrunde liegenden Zusammenfassung, wo das Modell auf ein geliefertes Dokument beschränkt ist.
Manual gewinnt, wenn die Kosten für einen falschen Satz hoch sind und das Volumen niedrig ist – eine regulatorische Einreichung, eine Änderung der Zugangsberechtigung, eine Preistabelle oder eine Sicherheitsprüfliste. Es gewinnt auch, wenn die Aufgabe wirklich neu ist, weil Originalität genau das ist, was eine Vorhersage-Engine nicht produziert.
Die MIT Sloan Zusammenfassung dieser Studieist blunt über das Grenzproblem: Innerhalb der Grenze fügen Menschen wenig hinzu; außerhalb davon tut KI aktiv weh. Die praktische Fähigkeit ist nicht sofortiges Engineering.
Das gleiche Muster erklärt, wer profitiert. inDie von Stanford und MIT beschriebene Call-Center-StudieFür einen erfahrenen Spezialisten, der Urteilsarbeit macht, ist das Werkzeug eine zweite Meinung, mit der sie streiten müssen – nützlich als Checkliste, nicht als Autor.
Lesen Sie das Projekt, bevor Sie wählen
Eine Entscheidung diese Konsequenz verdient eine Checkliste. ich benutze eine gebaut aus den Fehlfunktionsmodi oben, gefragt in der Reihenfolge.
- Wie hoch ist das Volumen und wie wiederholbar sind die Schritte? Wiederholung im Volumen begünstigt die Maschine; einmalige maßgeschneiderte Arbeit tut es nicht.
- Was kostet ein falscher Satz?Wenn ein Fehler billig zu fangen und zu beheben ist, automatisieren Sie mehr.Wenn es eine Compliance-Überprüfung auslöst oder einen Kunden verliert, halten Sie einen Menschen auf der endgültigen Forderung.
- Kann die Ausgabe mechanisch überprüft werden?Kode entweder kompiliert oder versagt; ein Strategie-Memo nicht.
- Wenn eine Person die Lieferung unterzeichnet, muss diese Person alle Ansprüche sehen, die die Maschine generiert, bevor sie versendet.
Ein an den Anbieter angrenzender Datenpunkt lohnt sich, da er den Hybridanspruch gegen bezahlte Arbeit prüft.Der Human+Agent Productivity IndexDie Studie, die auf mehr als 300 echten Kundenprojekten durchgeführt wurde, ergab, dass die Paarung von KI-Agenten mit erfahrenen menschlichen Bewertern die Projektabschlussraten im Vergleich zu Agenten, die alleine arbeiten, um bis zu 70 Prozent erhöhte.
Das Messproblem schneidet beide Wege ab.Simon Willisons Aufschrift des METR-Prozessesstellt fest, dass die Selbstberichte der Entwickler und ihre Stoppuhren sich um etwa 40 Punkte nicht einigten – die Leute fühlten sich schneller, während sie langsamer waren. Binden Sie jede Ansatzwahl an eine Metrik, der Sie bereits vertrauen: Lead-Zeit, Fehlerrate, Rework-Stunden oder gelieferte Gegenstände.
| Annäherung | Am besten wenn | Beobachten Sie für | Beispiel |
|---|---|---|---|
| manuell | Niedriges Volumen, hohe Einsätze, Neuheit, Rechenschaftspflicht | Langsamer Durchsatz und inkonsistentes Formatieren | Regulatorische Reaktion oder Preisentscheidung |
| AI-Hilfe | Hochvolumige, verifizierbare, wiederholte Entwürfe | Fluency-Masking-Fehler und homogenisierte Ausgabe | Meeting Notes, First-Pass Code, FAQ Entwürfe, Release Zusammenfassungen |
| Der Hybrid | Mehrstufige Arbeit Mischung von Urteil und Vollstreckung | Unklare Handoffs und Rubber-Stamp Bewertungen | Datenanalyse-Pipeline oder Startplan |
Was das für Ihr Projekt bedeutet
Hören Sie auf, einen Ansatz auf Projektebene zu wählen und beginnen Sie, ihn auf Schrittebene zu wählen. Ein Startplan ist keine einzige Aufgabe, es ist dreißig. Die Forschung kehrt immer wieder darauf zurück, weil die Fehler immer wieder darauf zurückkehren. Die vollständige Automatisierung eines gesamten Workflows erhöhte 17,7 Prozent der Überprüfung in der Stanford-Carnegie Mellon-Arbeit, während die Steps-Level-Augmentation 24,3 Prozent von ähnlichen Arbeiten reduzierte.
- Kartieren Sie den Workflow in Schritte, bevor Sie ein Tool berühren, und markieren Sie jeden Schritt als programmierbar oder als Urteil.
- Geben Sie dem Modell programmierbare Schritte zu, aber halten Sie die ersten und letzten Schritte menschlich: Eine Person definiert das Problem und eine Person unterzeichnet das Ergebnis.
- Schreiben Sie eine Verifizierungsregel für jeden Schritt der KI. Wer überprüft dies, gegen welche Quelle, bevor es weitergeht?
- Verfolgen Sie eine Geschwindigkeitsmetrik und eine Qualitätsmetrik von Anfang an.
Die BCG-Forscher nannten zwei Arbeitsstile, die den Rest übertrafen: Centaurs, die die Arbeit teilen und ganze Schritte auf das Modell delegieren, und Cyborgs, die mit der KI in der Mitte der Aufgabe interleave. Beide sind Hybrid; der Unterschied ist Granularität. Delegieren Sie ganze Schritte, wenn die Grenze zwischen ihnen klar ist. Interleave beim Schreiben oder Analysieren profitiert von dem Modell, das in der Schleife ist, während Sie gehen.
Rechenschaftspflicht wird nicht auf das Modell übertragen.Ein Team, das die KI-Ausgabe unter einem menschlichen Namen ohne menschliche Überprüfung versendet, hat den Fehler von der Maschine auf die Person übertragen, ohne das Wissen zu bewegen.Wenn etwas falsch ist, muss jemand spezifisch erklären können, warum es versandt wurde.Design die Handys, damit sie können.
Photo by Brett Jordan on Unsplash
Beginnen Sie mit einer wiederkehrenden Lieferung
Wählen Sie ein Artefakt, das Ihr Team auf einem Zeitplan produziert – einen Statusbericht, eine Pull-Request-Überprüfung, eine Datenübersicht oder eine Metrik-Digest. Zeit und zählen Sie die Fehler für zwei manuell durchgeführte Zyklen, dann führen Sie zwei Zyklen in Hybrid mit einer schriftlichen Überprüfungsregel beigefügt. Vergleichen Sie die Bereiche, nicht die Gefühle.
- manuel vs. AI-unterstützt vs. Hybrid
- AI-unterstützte Arbeit
- Mensch-im-Loop
- AI-Produktivität
- AI-Halluzinationen

