Eine Demo ist keine Evaluation
Ein erfolgreiches Beispiel kann beweisen, dass ein Werkzeug eine Antwort erzeugen kann. Es zeigt nicht, ob es in den Fällen, die im täglichen Arbeiten zählen, akzeptabel arbeitet. Ein Evaluationsweg macht den Unterschied sichtbar, indem er definiert, was getestet wird und wie ein Prüfer das Ergebnis beurteilt.
Erstellen Sie einen kleinen Prüfsatz
Beginnen Sie mit repräsentativen Fällen: eine gewöhnliche Anfrage, eine unvollständige Anfrage, eine mehrdeutige Anfrage und eine Anfrage, die an einen Menschen weitergegeben werden sollte. Verknüpfen Sie jede mit einer genehmigten Antwortform oder mit einer Prüfungsanweisung. Das gibt dem Team einen praktischen Weg, Qualität zu diskutieren, ohne sich auf Eindrücke zu verlassen.
Halten Sie die Aufzeichnung nutzbar
Speichern Sie die verwendete Quelle, die Aufgabenanweisung, die Ausgabe, die Prüfungsentscheidung und den Grund für jede Korrektur. Im Laufe der Zeit wird dies zu einer Lernressource sowohl für den Arbeitsablauf als auch für die Personen, die ihn steuern.