KI-Agenten Observability From Vibe Coding to Agentic Coding - VideoQuiz


KI-Agenten Observability From Vibe Coding to Agentic Coding - VideoQuiz
Kurzinfo
In diesem Video lernst Du, wie KI-Agenten im Hintergrund arbeiten und warum es so wichtig ist, ihre Entscheidungen nachzuvollziehen. Du erfährst, was ein 'Trace' ist und wie man Fehler in komplexen KI-Systemen aufspürt. Am Ende verstehst Du, warum wir Menschen trotz smarter Technik immer die Verantwortung behalten müssen.
Quiz: Teste Dein Wissen
Was unterscheidet einen KI-Agenten von einem einfachen Chatbot? (Ein KI-Agent plant, nutzt externe Werkzeuge und trifft selbstständig Entscheidungen.) (!Ein KI-Agent kann nur Texte übersetzen) (!Ein KI-Agent antwortet immer linear auf Knopfdruck) (!Ein KI-Agent benötigt keine Prompts mehr)
Warum wird im Video das Beispiel einer Mathearbeit genannt? (Weil die KI wie ein Schüler ihren genauen Rechenweg offenlegen muss.) (!Weil KI-Agenten besonders gut im Kopfrechnen sind) (!Weil man für KI-Programmierung eine Eins in Mathe braucht) (!Weil Fehler in der KI immer zu Punktabzug führen)
Was versteht man unter einem 'Trace' in der KI-Beobachtung? (Die lückenlose Aufzeichnung aller Schritte eines KI-Versuchs.) (!Ein spezielles Programmierwerkzeug für Chatbots) (!Die Geschwindigkeit, mit der eine KI antwortet) (!Ein Fehler im neuronalen Netzwerk)
Was ist ein 'Span' innerhalb eines Traces? (Ein klar abgegrenzter Teilabschnitt, wie der Aufruf eines Werkzeugs.) (!Das gesamte Endergebnis der KI) (!Ein plötzlicher Systemabsturz) (!Die Zeitspanne, bis der Nutzer antwortet)
Welche vier Schritte gehören zu einem typischen Tool-Aufruf eines Agenten? (Entscheidung, Formulierung, Ausführung und Interpretation.) (!Start, Stopp, Pause und Reset) (!Programmierung, Testen, Veröffentlichen und Löschen) (!Suchen, Finden, Kopieren und Einfügen)
Was ist der Unterschied zwischen Output-Eval und Trace-Eval? (Output-Eval bewertet nur das Endergebnis, während Trace-Eval den gesamten Prozess prüft.) (!Output-Eval ist viel genauer als Trace-Eval) (!Trace-Eval wird nur von Menschen durchgeführt) (!Output-Eval misst nur die Programmiergeschwindigkeit)
Warum fordert der EU AI Act ein Tracing für bestimmte KI-Systeme? (Um die Rückverfolgbarkeit bei Hochrisiko-KI gesetzlich zu garantieren.) (!Um die Entwicklung von KI-Systemen komplett zu verbieten) (!Damit KI-Agenten schneller arbeiten können) (!Um den Datenschutz für Unternehmen abzuschaffen)
Was bedeutet 'Datenminimierung' im Zusammenhang mit KI-Tracing? (Nur die Daten aufzuzeichnen, die für die Fehleranalyse wirklich notwendig sind.) (!Die Festplatte der KI regelmäßig zu löschen) (!Die Antworten der KI so kurz wie möglich zu halten) (!Die Anzahl der Nutzer eines KI-Systems zu begrenzen)
Was kann Tracing laut Video nicht leisten? (Erklären, warum das neuronale Netz im Inneren genau so verknüpft ist.) (!Zeigen, welches externe Tool aufgerufen wurde) (!Fehler im Ablauf des Agenten sichtbar machen) (!Die Dauer einzelner Schritte messen)
Wer trägt laut Video letztendlich immer die Verantwortung für die KI? (Der Mensch, der die Richtlinien und Metriken definiert.) (!Der KI-Agent selbst) (!Das externe Tool, das fehlerhafte Daten geliefert hat) (!Die Europäische Union)
Offene Aufgaben
Leicht
- Chatbot vs. Agent: Erkläre in eigenen Worten den Unterschied zwischen einem einfachen Chatbot und einem KI-Agenten.
- Mathe-Vergleich: Warum ist das Endergebnis einer KI allein nicht genug? Nutze das Beispiel der Mathearbeit aus dem Video.
- Begriffe zuordnen: Schreibe die Begriffe 'Run', 'Trace' und 'Span' auf und erkläre sie kurz.
- Tool-Beispiel: Nenne ein Beispiel für ein externes Werkzeug (Tool), das ein Reise-KI-Agent nutzen könnte.
Standard
- Fehlerpfade finden: Stell dir vor, ein KI-Agent bucht einen falschen Flug. Beschreibe, an welchen Stellen im Tool-Aufruf der Fehler liegen könnte.
- Output vs. Trace: Erstelle eine kleine Tabelle, die die Vor- und Nachteile von Output-Evaluation und Trace-Evaluation gegenüberstellt.
- Datenschutz beim Tracing: Warum ist Tracing ein Problem für den Datenschutz und wie kann man sensible Daten schützen?
- EU AI Act: Recherchiere kurz, was der EU AI Act ist, und erkläre, warum Tracing dort für Hochrisiko-KI gefordert wird.
Schwer
- Die Grenzen von Tracing: Diskutiere die Aussage: 'Tracing zeigt uns das Was, aber nicht das Warum.' Was bedeutet das für unser Vertrauen in KI?
- Verantwortung delegieren?: Kann man Verantwortung an eine Maschine übergeben? Begründe deine Meinung basierend auf den Argumenten des Videos.
- Eigene Richtlinien entwerfen: Entwirf ein kurzes Regelwerk (Governance-Regeln) für eine KI, die an deiner Schule Schülerdaten verarbeitet.
- KI-Agenten-Szenario: Entwickle ein Szenario für einen KI-Agenten im Schulalltag (z.B. Hausaufgaben-Planer). Welche Tools braucht er und wo könnten Fehler auftreten?


Links
aiMOOC-Projekte
Schulfach+


aiMOOCs



aiMOOC Projekte


THE MONKEY DANCE





|
LernweltNOAH fragen