Spark-Pipeline für ein Stuttgarter AutoTech-Telemetrie-Lakehouse
Übersicht
Worum es bei diesem Projekt geht.
Baue eine Medallion-Pipeline für AutoTech-Telemetrie mit Delta Lake, Bronze-to-Gold und Optimierung. Erhalte ein verifizierbares Zertifikat.
Das Szenario
Der Anbieter (rund 60 Mio. EUR ARR, 2 Mio. Connected Vehicles) braucht Tagesreports vor 9:00 Uhr — heute kommen sie gegen 14:00 Uhr.
Das Briefing
Was Du tust und was Du zeigst.
Bringe eine 14-TB/Tag-Telemetrie-Pipeline mit Delta Lake und Spark verlässlich unter 90 Minuten — mit messbaren Garantien.
Earning criteria — what you'll demonstrate
- Medallion-Architektur in Delta Lake produktiv umsetzen
- Spark-Performance via Partitioning, Z-Ordering und File-Compaction optimieren
- Late-Arriving-Data und idempotente MERGE-Pattern korrekt anwenden
- Batch-Pipelines mit messbaren SLOs operationalisieren
Studienpassung
Wo dies in Dein Studium passt.
Schärft dieselben Fähigkeiten, die Dein Studium von Dir erwartet.
Big Data and Data-Intensive Systems
Master · Databases
Strong alignment
This challenge maps to Big Data and Data-Intensive Systems at the Master level. It sharpens the same practical skills your coursework expects — but in a real industry context with actual constraints and deliverables.
Fähigkeiten
Fähigkeiten, die Du unter Beweis stellst.
Jede taucht auf Deinem verifizierten Zertifikat auf.
- Apache Spark
Apply apache spark to solve real industry problems and demonstrate production-level capability.
- Delta Lake
Apply delta lake to solve real industry problems and demonstrate production-level capability.
- Data Lakehouse
Apply data lakehouse to solve real industry problems and demonstrate production-level capability.
- Distributed Systems
Apply distributed systems to solve real industry problems and demonstrate production-level capability.
- Data Modeling
Apply data modeling to solve real industry problems and demonstrate production-level capability.
- Performance Optimization
Apply performance optimization to solve real industry problems and demonstrate production-level capability.
Karrieren
Berufe, auf die dies Dich vorbereitet.
Echte Berufsbezeichnungen. Echte Skill-Brücken. Wähle die, die Deinem Werdegang am nächsten kommt.
Noch eine Sache