Blick in die Blackbox: Tracing-Architekturen für Generative KI (m/w/d)
Was du bei uns bewegst KI-Agenten und LLM-Anwendungen laufen inzwischen im echten Betrieb. Was zwischen Prompt und Antwort passiert, bleibt aber oft unsichtbar. Klassisches Monitoring zeigt Latenz und Fehlerraten, aber nicht, warum sich ein KI-System so verhalten hat.
Für dieses Problem gibt es gerade viele Lösungen: spezialisierte Plattformen wie MLflow, Arize oder Langfuse, eigene Ansätze der großen Cloud-Anbieter und den offenen Standard OpenTelemetry. Alles entwickelt sich schnell und ist oft noch nicht ausgereift. Im Mittelpunkt deiner Arbeit steht OpenTelemetry: Der Standard entwickelt sich gerade aktiv weiter und wird von immer mehr Anbietern unterstützt. Andere Ansätze ziehst du zum Vergleich heran. Genau hier setzt du an, ganz vorne bei einem Thema, das sich gerade erst formt.
Deine Aufgaben:
- Du verschaffst dir einen Überblick über aktuelle Ansätze für Tracing und Observability bei Generativer KI.
- Du erarbeitest Referenzarchitekturen und wägst sie gege...
Lorem ipsum dolor sit amet, consectetur adipiscing elit. Sed do eiusmod tempor incididunt ut labore et dolore magna aliqua. Ut enim ad minim veniam, quis nostrud exercitation ullamco laboris nisi ut aliquip ex ea commodo consequat. Duis aute irure dolor in reprehenderit in voluptate velit esse cillum dolore eu fugiat nulla pariatur. Excepteur sint occaecat cupidatat non proident, sunt in culpa qui officia deserunt mollit anim id est laborum.
Sed ut perspiciatis unde omnis iste natus error sit voluptatem accusantium doloremque laudantium, totam rem aperiam, eaque ipsa quae ab illo inventore veritatis.