Lessons Learned: Fünf KI-Fehler in Arbeitsanweisungen, die Prüfer beim Überfliegen übersehen

Also haben wir uns die Mühe gemacht. Wir haben Entwürfe aus echten Service-Aufnahmen genommen und Zeile für Zeile mit dem abgeglichen, was im Video gesagt und gezeigt wird: Reinigungsroutinen, eine Kalibrierung, einen Motortest, einen Riemenwechsel, aufgenommen von Technikern auf Französisch und Englisch. Jeden Schritt, jeden Wert. Die Aufnahmen stammen aus einem Pilot mit dem Field-Service-Team eines internationalen Recycling-Konzerns in Kanada, im Juli und August 2026. Mehr zu den Aufnahmen und zur Auswertung steht in Wo ein Video-to-SOP-Entwurf Details verliert.

Die Fehler lassen sich fünf Mustern zuordnen. Spektakulär ist keiner davon. Relevant sind alle, denn genau diese Fehler rutschen einem Prüfer unter Zeitdruck beim Überfliegen durch.

Ein Techniker stellt einen Tester auf einen bestimmten Wert und sagt die Zahl dabei laut. Im Entwurf steht: „Empfindlichkeit einstellen und Test starten.“ Der Satz stimmt. Der Schritt ist trotzdem wertlos, denn auf die Zahl kam es an.

Kein Fehler kostet mehr Vertrauen. Wer einmal einen fehlenden Wert gefunden hat, glaubt keinem Schritt mehr und schaut jedes Video noch einmal an. Damit ist die Zeitersparnis dahin.

Nicht jede Zahl aus einer Aufnahme gehört in die SOP. Manche sind geschätzt, manche werden eine Minute später korrigiert, manche fallen nebenbei. Ein Wert aber, der als Einstellung, Grenzwert oder Sollwert für einen Schritt genannt wird, gehört hinein. Fehlt er im Entwurf, muss der Prüfer darauf hingewiesen werden, statt es selbst entdecken zu müssen.

Regel: Jede Zahl mit Einheit aus der Aufnahme landet entweder im Entwurf oder steht für den Prüfer auf einer Liste „genannt, nicht verwendet“, mit Zeitstempel. Dieser Abgleich ist reine Fleißarbeit und darf nicht davon abhängen, ob gerade jemand aufmerksam ist.

So prüfen Sie: Bevor Sie die Schritte lesen, gehen Sie das Transkript auf Zahlen durch. Entscheiden Sie bei jeder, ob sie relevant ist. Dann suchen Sie die relevanten im Entwurf.

Der umgekehrte Fall. Ein Techniker richtet einen Riemen aus und sagt: „Ich bin nicht sicher, vielleicht zwei Millimeter, oder einer, oder anderthalb. Einfach eine Umdrehung.“ Im Entwurf steht: „Stellschraube genau eine volle Umdrehung drehen, um die endgültige Spannung einzustellen.“

Hier ist zweierlei passiert: Das Zögern ist verschwunden, und ein „genau“ ist dazugekommen. Der Techniker hat den Riemen ausgerichtet, nicht gespannt. Der Entwurf macht trotzdem aus einer groben Schätzung eine Spezifikation.

Eine Variante davon: Im Entwurf steht „Stecker in eine 110/220-V-Steckdose stecken“, obwohl niemand eine Spannung erwähnt hat. Das Modell hat ergänzt, was plausibel klang. Bei Elektrik reicht plausibel nicht.

Regel: Jeder Wert im Entwurf braucht eine Quelle: die Aufnahme, eine freigegebene Spezifikation oder den Prüfer. Was unsicher gesagt wurde, bleibt unsicher: „ca. eine Umdrehung; mit Spezifikation abgleichen“.

So prüfen Sie: Suchen Sie nach „genau“, „immer“, „nie“ und nach jeder Zahl. Fragen Sie bei jeder, woher sie stammt.

Wer arbeitet, korrigiert sich. In einer Aufnahme sagt der Techniker zuerst, ein Motor drehe richtig herum. Ein paar Minuten später kommt er mit einem Kollegen zum Schluss, dass das nicht stimmt, und erklärt, warum. Der Entwurf hat die erste Aussage behalten und die Qualitätsprüfung darauf aufgebaut. Damit stand das Gut/Schlecht-Kriterium des ganzen Tests auf dem Kopf.

Ein Modell, das ein sauberes Dokument liefern soll, löst Widersprüche gern auf. Saubere Dokumente enthalten schließlich keine. Der Prüfer muss aber wissen, dass die Aufnahme nicht eindeutig war. Erst recht, wenn es um das Abnahmekriterium geht.

Regel: Widersprüchliche Aussagen zum selben Punkt werden im Entwurf markiert, und zwar beide, mit Zeitstempel. Entscheiden muss der Prüfer.

So prüfen Sie: Lesen Sie zuerst die Kriterien der Qualitätsprüfung und vergleichen Sie sie mit den letzten Minuten des Videos. Korrekturen kommen meist spät.

Stehen zwei Leute vor der Kamera, fragt meist einer. „Ist das nur für die Scheibe oder auch für den Riemen?“ „Wie oft reinigst du das?“ Im Entwurf kann aus einer Frage ein Schritt werden. Und die Antwort auf ein Gedankenspiel („wenn er vorwärts drehen würde, müsstest du die Drähte tauschen“) liest sich plötzlich wie eine Anweisung für etwas, das nie passiert ist.

Dasselbe gilt für Aufnahmen, die eher Besprechung als Vorführung sind. In einer davon hat das Team eine Minute lang Fehlermeldungen durchgesprochen, ohne die Anlage anzufassen. Der Entwurf machte trotzdem Handlungsschritte daraus, samt überzeugend klingender Begründungen.

Regel: Ein Schritt, der aus einer Aufnahme stammt, braucht eine Handlung in dieser Aufnahme. Aus einem Gespräch ohne Handlung werden Notizen, keine Schritte. Schritte aus anderen Quellen, etwa einer Spezifikation oder dem Fachwissen des Prüfers, sind in Ordnung. Sie müssen aber als solche gekennzeichnet sein und dürfen nicht so tun, als wären sie gefilmt.

So prüfen Sie: Suchen Sie zu jedem Schritt die Stelle im Video, an der die Handlung passiert. Gibt es keine, finden Sie die Quelle oder streichen Sie den Schritt.

Dieser Fehler hat nichts mit Sprache zu tun. Felder für die Gefährdungsbeurteilung starten in vielen Arbeitsanweisungen mit einem Standardwert. Trägt der Prüfer Gefährdung („Stromschlag“) und Maßnahme ein, lässt die Risikobewertung aber unberührt, druckt das Dokument am Ende womöglich den Standardwert: niedrigste Stufe, in Grün, direkt neben einer elektrischen Gefährdung.

Bewertet hat dieses Risiko niemand. Das Dokument behauptet das Gegenteil.

Regel: Ein nicht bewertetes Feld erscheint als nicht bewertet, nie als Wert. Was fehlt, muss auch nach Lücke aussehen.

So prüfen Sie: Kontrollieren Sie im Sicherheitsabschnitt jede Bewertung, die Sie nicht selbst gesetzt haben.

Jeder dieser Fehler lässt das Dokument fertiger aussehen, als die Aufnahme war. Ein fehlender Wert hinterlässt einen glatten Satz. Erfundene Präzision klingt verbindlicher als das Zögern, das sie ersetzt. Ein aufgelöster Widerspruch liest sich sauberer als ein offener. Eine Frage, aus der ein Schritt wurde, füllt eine Lücke. Ein grüner Standardwert sieht aus wie eine Entscheidung.

Darin liegt das eigentliche Risiko KI-generierter Arbeitsanweisungen. Sie sehen nicht falsch aus. Sie sehen richtig aus. Der Prüfer liest einen flüssigen, gut gegliederten Entwurf, nichts springt ins Auge, und er gibt frei.

Die Lösung liegt zum Teil in der Software, zum Teil in der Prüfung. Die Software sollte die Fleißarbeit übernehmen (Werte rein gegen Werte raus, unbewertete Felder, widersprüchliche Aussagen) und die Ergebnisse offenlegen, statt sie zu verstecken. Dann kann sich der Prüfer auf das konzentrieren, wobei ihm keine Software hilft: Sind das die richtigen Schritte? Und liegt der Schwerpunkt auf den Teilen der Arbeit, auf die es wirklich ankommt?

Das ersetzt keine fachliche Freigabe. Es ist der erste Durchgang, den wir vor der fachlichen Prüfung empfehlen, weil er die fünf Fehler schnell aufdeckt:

1. Transkript auf Zahlen und Einheiten durchgehen. Relevante markieren und jede im Entwurf wiederfinden.

2. Entwurf nach „genau“, „immer“, „nie“ und jeder Zahl durchsuchen. Für jede die Quelle finden.

3. Kriterien der Qualitätsprüfung mit dem Ende des Videos vergleichen.

4. Für jeden Schritt prüfen: Gibt es die Handlung im Video oder eine benannte Quelle?

5. Im Sicherheitsabschnitt jede Bewertung kontrollieren, die Sie nicht selbst gesetzt haben.

Findet dieser Durchgang mehrere Probleme, schauen Sie zuerst in die Aufnahme, bevor Sie den Entwurf korrigieren. Meist liegt es an stillen Passagen oder Gesprächen vor der Kamera. Und oft geht es schneller, zwei Minuten neu aufzunehmen, als zehn Schritte umzuschreiben. Vor dem Einsatz braucht jede KI-generierte Arbeitsanweisung weiterhin die Freigabe durch eine qualifizierte Person.