Prompt-Versionierung und Regressionstests für ein Wiener KI-Produkt
Übersicht
Worum es bei diesem Projekt geht.
Du baust ein System mit (1) Prompt-Speicher als versionierten Markdown-/YAML-Dateien im Git-Repo; (2) Test-Set von 200 Beispielen mit Goldstandard-Antworten; (3) GitHub-Actions-CI, die bei jeder Prompt-Änderung Regressionen auf Faithfulness und Stil bewertet (Ragas + LLM-as-judge); (4) Promotion-Tool, das eine geprüfte Prompt-Version per Tag in Produktion bringt. Liefere Repository, CI-Workflow, Promotion-Tool, Doku und Memo.
Das Briefing
Was Du tust und was Du zeigst.
Wie sieht ein produktreifes Prompt-Versionierungs-System aus, das Prompt-Änderungen schnell und sicher in Produktion bringt?
Earning criteria — what you'll demonstrate
- Prompts als versionierte Artefakte im Git-Workflow behandeln
- Regressionstests für LLM-Antworten in CI integrieren
- Promotion-Logik zwischen Staging und Produktion sauber kapseln
- Engineering-Disziplin für LLM-Apps in einem kleinen Team verankern
Studienpassung
Wo dies in Dein Studium passt.
Schärft dieselben Fähigkeiten, die Dein Studium von Dir erwartet.
Fähigkeiten
Fähigkeiten, die Du unter Beweis stellst.
Jede taucht auf Deinem verifizierten Zertifikat auf.
Karrieren
Berufe, auf die dies Dich vorbereitet.
Echte Berufsbezeichnungen. Echte Skill-Brücken. Wähle die, die Deinem Werdegang am nächsten kommt.
Karrierewege, die das aufbaut
Kanonische RollenMLOps-Ingenieur:in
Prompt-Versionierung und CI-Regressionstests sind direkte MLOps-Verantwortlichkeiten in Teams, die LLM-Pipelines produktiv betreiben.
Dieses Projekt schärft
- prompt-versioning
- ci-cd
- regression-testing
KI-Engineer
Prompt-Workflows mit Promotion-Logik zu kapseln, ist Tagesarbeit von KI-Engineers in produktnahen LLM-Teams.
Dieses Projekt schärft
- prompt-versioning
- ragas
- llm-evaluation
Prompt Engineer
Versionierte Prompts mit reproduzierbaren Tests sind das Werkzeug, das Prompt Engineers brauchen, um disziplinierte Iterationen zu liefern.
Dieses Projekt schärft
- prompt-versioning
- llm-evaluation
- github-actions
Noch eine Sache