Lektion 15 · KI-Systeme selbst aufbauen

Qualität prüfen und Fehler eingrenzen

Du findest heraus, ob ein Fehler beim Einlesen, Suchen oder Antworten entsteht.

Etwa 30 MinutenKostenlosErstfassung · 11.09.2026

Lernziel

Du findest heraus, ob ein Fehler beim Einlesen, Suchen oder Antworten entsteht.

Voraussetzungen

Das Abschlussprojekt oder die vorbereiteten Beispielfundstellen.

So funktioniert es

„Die KI antwortet schlecht“ ist noch keine brauchbare Fehlerbeschreibung. Zerlege den Weg der Information. Wurde die richtige Datei gelesen? Ist der gesuchte Satz in einem Abschnitt vorhanden? Wird dieser Abschnitt gefunden? Erst danach kommt die Formulierung durch das Modell.

Erstelle einen kleinen Testsatz, dessen erwartete Antworten du kennst. Dazu gehören einfache Treffer, umformulierte Fragen, eine Frage mit fehlender Information und eine Frage, deren Antwort nach einer Dokumentänderung anders sein muss. Halte für jeden Test die erwartete Fundstelle fest.

Miss nicht nur, wie freundlich die Antwort klingt. Für fünf Fragen kannst du zählen, bei wie vielen die passende Fundstelle unter den Treffern liegt und bei wie vielen jede Aussage belegt ist. Ein schönes Ergebnis bei einem einzigen Beispiel genügt nicht.

Typische technische Fehler

Verbindung abgelehnt
Prüfe, ob Ollama läuft. Ändere nicht sofort Firewall oder Netzwerkschnittstellen.
Modell nicht gefunden
Vergleiche den exakten Namen mit ollama list. Lade das benannte Modell bei Bedarf.
Antwort dauert lange
Prüfe Arbeitsspeicher, laufende Modelle und Eingabelänge. CPU-Inferenz kann langsam sein.
Falsche Antwort trotz richtigem Treffer
Vergleiche Kontext und Antwort. Verbessere die Anweisung oder reduziere die Aufgabe; behalte die Kennzeichnung als ungeprüft bei.

Konkretes Beispiel

Die Frage nach der Ausleihdauer findet nur Öffnungszeiten. Das ist zunächst ein Suchproblem. Wird dagegen „sieben Tage“ gefunden und „zwei Wochen“ geantwortet, liegt der Fehler in der Antwortverarbeitung.

Deine Übung

Fülle die Qualitätscheckliste für fünf Projektfragen aus. Ändere danach nur eine Sache, etwa die Abschnittsgrenze, und wiederhole genau dieselben Fragen. Schreibe auf, ob wirklich mehr richtige Fundstellen erscheinen.

Selbsttest

Der richtige Absatz wird gefunden, aber die Antwort verändert eine Zahl. Wo suchst du zuerst?

Lösung mit Erklärung

Bei der Antwortverarbeitung und ihrem Kontext.

Die Suche hat bereits die richtige Information geliefert. Die nächste zu prüfende Stufe ist die Formulierung daraus.

Häufige Fehler

  • Mehrere Einstellungen gleichzeitig ändern.
  • Nur einfache Erfolgsfälle testen.
  • Unbelegte Antworten aus dem Prüfprotokoll weglassen.

Nächster Lernschritt

APIs und kontrollierte Automatisierung →

Quellen

Offizielle Dokumentation und Originalveröffentlichungen; abgerufen am 11. September 2026. Eigene Beispiele und Übungen stammen von Wittmer AI. Externe Seiten können sich ändern.

Dein Lernfortschritt

Optional, nur in diesem Browser. Kein Konto, keine Übertragung. Bei gelöschten Browserdaten geht der Fortschritt verloren.