Wie KI arbeitet und wo sie danebenliegt

Format: Inhouse-Tag 1, Vormittag · Pfade: alle · Dauer: rund zweieinhalb Stunden im Raum, dazu eine Stunde Vorbereitung im Kompass

Einstieg

Stellt euch eine neue Kollegin vor, die unglaublich belesen ist. Sie hat mehr Texte gesehen als alle in eurem Betrieb zusammen, schreibt in Sekunden, übersetzt in jede Sprache und wird nie ungeduldig. Sie hat allerdings zwei Eigenheiten: Sie kennt euren Betrieb nicht, und wenn sie etwas nicht weiß, sagt sie es selten. Lieber erzählt sie etwas, das gut klingt.

Genau so lohnt es sich, über KI zu denken. Wer diese beiden Eigenheiten verstanden hat, bekommt bessere Ergebnisse und fällt seltener herein. Dieses Modul legt dafür das Fundament: Wie kommt ein Sprachmodell zu seinen Antworten, wie beschreibt ihr eine Aufgabe so, dass etwas Brauchbares entsteht, und wie prüft ihr das Ergebnis, bevor es euren Schreibtisch verlässt.

Alles Weitere im Programm baut auf diesem Vormittag auf. Deshalb sind alle dabei, von der Geschäftsführung bis zur Werkstatt.

Was ihr danach könnt

• in eigenen Worten erklären, wie ein Sprachmodell zu seinen Antworten kommt und warum es manchmal erfindet,
• eine Aufgabe aus eurem Alltag mit dem Prompt-Gerüst aus fünf Teilen so beschreiben, dass ein brauchbares Ergebnis entsteht,
• ein KI-Ergebnis mit drei festen Prüffragen gegenchecken, bevor ihr es weitergebt.

Inhalte

Wie ein Sprachmodell antwortet

Ein Sprachmodell (die Technik hinter Werkzeugen wie ChatGPT, Claude, Copilot oder Gemini) hat beim Training aus riesigen Textmengen gelernt, welche Wörter in welchem Zusammenhang aufeinander folgen. Wenn ihr eine Frage stellt, setzt es Wort für Wort die Fortsetzung zusammen, die am besten zu eurer Eingabe passt. Das wirkt wie Verstehen und ist oft erstaunlich treffsicher. Es bleibt aber eine Rechnung über Wahrscheinlichkeiten.

Daraus folgen drei Dinge, die ihr euch merken solltet:

1. Das Modell weiß nur, was ihr ihm sagt, und was es beim Training gesehen hat. Euren Kunden, eure Preisliste und den Stand auf der Baustelle kennt es erst, wenn ihr ihn in die Anweisung schreibt oder ihm ein Dokument gebt.
2. Es klingt immer sicher. Eine falsche Antwort ist genauso flüssig formuliert wie eine richtige. Fachleute sagen dazu Halluzination: Das Modell erfindet eine Quelle, eine Norm oder eine Zahl, weil sie gut in den Satz passt.
3. Es antwortet jedes Mal etwas anders. Dieselbe Frage zweimal gestellt ergibt zwei Fassungen. Für Texte ist das ein Vorteil, für Zahlen und Fakten ein Grund mehr zum Prüfen.

Wie Werkzeuge, Ebenen und Stufen zusammenhängen, steht ausführlich auf Stufe 2 im Kompass. Hier im Modul geht es um das Gefühl dafür, und das entsteht beim Ausprobieren.

Die gezackte Grenze

Eine große Studie von Harvard und BCG (Dell’Acqua u. a. 2023, 758 Beraterinnen und Berater) hat gezeigt, wie ungleich KI hilft. Bei passenden Aufgaben wurden die Teilnehmenden schneller und besser. Bei einer Aufgabe knapp außerhalb der Stärken der KI lagen sie dagegen häufiger daneben als ohne KI, und ihre falschen Antworten klangen überzeugender. Die Forschenden nennen das die gezackte Grenze: Von außen seht ihr nicht, wo KI glänzt und wo sie plausibel danebenliegt.

Für euren Alltag heißt das: KI ist stark beim Formulieren, Zusammenfassen, Übersetzen, Gliedern und beim ersten Entwurf. Vorsicht gilt bei Rechnungen, Normen, Fristen, Rechtsfragen, Preisen und allem, was aktuell sein muss. Die Einzelheiten und weitere Beispiele stehen in der Säule Schulen.

Das Prompt-Gerüst aus fünf Teilen

Ein Prompt ist die Anweisung an die KI. Wir arbeiten mit einem einfachen Gerüst, das sich jeder merken kann: Rolle, Lage, Auftrag, Form, Maßstab. Wer diese fünf Teile füllt, beschreibt die Aufgabe so, wie er sie auch einer neuen Kollegin erklären würde. Das Gerüst mit einem Beispiel aus einem Fliesenbetrieb steht in der Säule Schulen, eine Karte zum Ausdrucken in den Vorlagen.

Wichtiger als der perfekte erste Prompt ist das Gespräch danach. Sagt der KI, was euch fehlt: „kürzer”, „per Sie”, „mit einer klaren Frage am Ende”, „zeig mir zwei Varianten”. Gute Ergebnisse entstehen im zweiten und dritten Schritt.

Die drei Prüffragen

Bevor ein KI-Ergebnis euren Schreibtisch verlässt, stellt ihr drei Fragen:

1. Stimmt es? Jede Zahl, jedes Datum, jeder Name, jede Norm und jede Quelle wird gegen etwas geprüft, das ihr kennt oder nachschlagen könnt.
2. Passt es zu uns? Tonfall, Anrede, Zusagen und Preise müssen zu eurem Betrieb passen. KI verspricht gern Dinge, die ihr nie zusagen würdet.
3. Würde ich meinen Namen darunter setzen? Ihr bleibt verantwortlich für das, was rausgeht. Wenn ihr zögert, bessert nach oder schreibt selbst.

Diese drei Fragen begleiten euch durch alle zehn Module. Ab Modul 6 werden sie zur Testliste für eure Assistenten, ab Modul 9 zur Grundlage für das Testen von Agenten.

Übungen am eigenen Betrieb

Übung 1: Drei echte Aufgaben, drei Versuche

Ziel: erleben, wie viel ein guter Prompt ausmacht.

1. Jede Person bringt drei Aufgaben aus der letzten Woche mit, die etwas mit Text zu tun hatten: eine Antwort an einen Kunden, eine Zusammenfassung, eine Stellenanzeige, eine Arbeitsanweisung, eine Übersetzung für einen Lieferanten.
2. Erster Versuch: Schreibt die Aufgabe so in das freigegebene Werkzeug, wie ihr sie spontan formulieren würdet, in einem Satz.
3. Zweiter Versuch: Füllt das Prompt-Gerüst mit allen fünf Teilen aus. Gelbe Informationen nach der Datenampel (Namen, Angebote) ersetzt ihr heute durch Platzhalter wie „Kunde A”.
4. Dritter Versuch: Führt mit der KI zwei bis drei Runden Gespräch und schärft nach.
5. Legt die drei Fassungen nebeneinander und bewertet jede auf einer Skala von 1 bis 5: Wie viel davon würdet ihr so verschicken?

Ergebnis: drei Aufgaben mit einem Prompt, der funktioniert. Den besten legt ihr in die gemeinsame Prompt-Sammlung eures Teams, die in diesem Modul beginnt.

Übung 2: Echt oder überzeugend falsch, mit euren Fragen

Ziel: die gezackte Grenze am eigenen Fachgebiet spüren.

1. Spielt zuerst das Quiz „Echt oder überzeugend falsch?” in der Werkstatt des Kompass, gemeinsam an der Leinwand.
2. Dann schreibt jedes Paar fünf Fragen aus dem eigenen Fach auf, deren Antwort es sicher kennt: eine Norm, eine Frist, eine Rezeptur ohne Geheimnis, eine Tarifregel, eine Montageanleitung, ein Datum aus der Firmengeschichte.
3. Stellt die Fragen der KI und markiert jede Antwort: richtig, teilweise richtig, falsch, erfunden.
4. Sammelt die erfundenen Antworten an der Wand. Sprecht darüber, woran man sie hätte erkennen können.

Ergebnis: eine Liste „Hier liegt KI bei uns daneben”, die in Modul 2 in die Richtlinie und in Modul 6 in die Testfälle eurer Assistenten einfließt.

Übung 3 (für Builder): Dieselbe Frage fünfmal

Stellt eine Frage mit einer Zahl im Ergebnis fünfmal neu, etwa „Wie viele Quadratmeter Fliesen brauche ich für ein Bad von 2,40 mal 3,10 Metern mit 10 Prozent Verschnitt?”. Notiert die Antworten. Wiederholt das mit der Bitte, den Rechenweg zu zeigen. Ihr seht, warum Rechnungen in Abläufe gehören, die ein Programm rechnet, und warum die KI dort nur den Text drumherum schreibt. Das greift Modul 8 wieder auf.

Ein Fall aus dem Mittelstand

Das Beispiel ist aus Situationen zusammengesetzt, wie sie uns in ähnlicher Form begegnen. Namen und Zahlen sind erfunden.

Eine Elektrofirma aus der Oberlausitz mit 35 Beschäftigten hatte KI zunächst „einfach laufen lassen”. Eine Bauleiterin nutzte sie für Texte an Kunden, und sie war begeistert. Bis eine Mail an einen Bauherrn rausging, in der die KI eine Prüffrist für eine Anlage genannt hatte, die es so nicht gab. Der Bauherr fragte nach, der Fehler war schnell geklärt, unangenehm war es trotzdem.

Am ersten Programmtag sammelte das Team in Übung 2 seine Fachfragen. Von 40 Fragen beantwortete die KI 24 richtig, 9 teilweise und 7 falsch, darunter drei mit erfundenen Normnummern. Das hat niemand vergessen. Das Team schrieb danach eine einfache Regel in seine Richtlinie: Normen, Fristen und Preise schreibt ein Mensch, die KI formuliert den Rest. Die Bauleiterin nutzt KI seitdem eher mehr als vorher, weil sie jetzt weiß, wofür.

Checkliste

• Alle im Team haben einen Zugang zu einem freigegebenen Werkzeug und sind angemeldet.
• Jede Person kann in zwei Sätzen erklären, warum KI manchmal erfindet.
• Jede Person hat mindestens eine echte Aufgabe mit dem Prompt-Gerüst gelöst.
• Die gemeinsame Prompt-Sammlung ist angelegt, mit mindestens fünf Einträgen.
• Die Liste „Hier liegt KI bei uns daneben” ist geschrieben und liegt für Modul 2 bereit.
• Die drei Prüffragen hängen sichtbar am Arbeitsplatz oder stehen in der Prompt-Sammlung ganz oben.
• Der Selbsttest im Kompass ist gemacht und das Ergebnis gespeichert, damit ihr in Woche 12 vergleichen könnt.