Senior Data Engineer (Azure Databricks)

Callista Group AG·Frankfurt, Hessen, Germanysenior

In short

→Ingeniero de datos senior que construye una plataforma de datos lakehouse en Azure y Databricks para una aseguradora.
→Desarrolla pipelines ETL/ELT con PySpark, Delta Lake y gestión de calidad de datos, con enfoque en historización y monitoreo.
→Destaca por trabajar en equipo con el cliente, con alto componente de transferencia de conocimiento y uso de CI/CD.

Gute Englischkenntnisse

Apply on company site ↗Share on WhatsApp

✓ Free to start✓ Runs in your browser✓ First dossier, no card✓ Ready in ~1 minute

In ~1 minute you get: who interviews you, the likely questions answered from your CV, and your CV tailored to this job. Your first dossier is free.

The questions they'll ask you

1. Wie implementierst du Fehlerbehandlung und Wiederanlauf in Databricks-Workflows mit PySpark?

🔒 +7 more questions

No card. Upload your resume and the full dossier is ready in ~1 minute.

🎧Land the interview? Bring the copilot. Our free extension listens to the live interview and flashes 3-4-word anchors from your resume and prep — glance, connect, talk. Get the extension →

💵 USD · Remote · No visa

Not finding what you want? Try Micro1

Micro1 places engineers directly at US companies paying in USD. One vetting, multiple offers — no cold applying.

Get matched by Micro1 →

📬Jobs picked for YOUR resume, every morning on WhatsApp. Free: text “vacantes” and the bot sends your daily matches. Subscribe →

What they ask for

✓Más de 3 años como Data Engineer con experiencia en data warehouses o lakehouses
✓Conocimientos sólidos en Databricks, PySpark, SQL y Delta Lake
✓Experiencia con Databricks Workflows, Azure Data Factory y servicios Azure
✓Habilidades en modelado de datos con Historización (Data Vault o dimensional)
✓Experiencia con Git, CI/CD y testing automatizado de pipelines
✓Conocimiento en KI-generativa para desarrollo de código (ej. asistentes de codificación)

Don't tick every box? That's normal — your free dossier shows your gaps and how to cover them in the interview.

DatabricksPySparkSQLDelta LakeAzure Data FactoryAzure Blob StorageAzure Synapse AnalyticsGitCI/CDData Catalog

Who should you write to at Callista Group AG?

Your free dossier identifies the people who'd interview you — their background, what they value, and how to reach out so you stand out before applying.

Für unseren Kunden, ein Versicherungsunternehmen im Großraum Frankfurt am Main, suchen wir im Rahmen des Aufbaus einer neuen dispositiven Datenplattform (Lakehouse) auf Basis von Microsoft Azure und Databricks zwei erfahrene Data Engineers. Du baust die Datenstrecken von den Quellsystemen bis in das Core-Modell und übernimmst dabei die technische Federführung in der Umsetzung. Du arbeitest im Tandem mit Mitarbeitenden des Kunden und gibst dein Databricks-Know-how aktiv weiter. Aufgaben Anbindung von Quellsystemen und externen Dienstleistern (Delta-Lieferungen, Dateien, APIs) sowie eines CRM-Systems inklusive automatisierter Ladeprozesse Entwicklung von ETL/ELT-Strecken mit Delta-Verarbeitung, Fehlerbehandlung und nachvollziehbaren Wiederanlaufverfahren Umsetzung der Dublettenbereinigung und Zusammenführung von Kunden- und Vermittlerdaten Implementierung des Core-Datenmodells mit Historisierung entlang der Medallion-Architektur (Databricks, PySpark, SQL) Umsetzung von Datenqualitätsregeln, Prüfroutinen, Monitoring und Alerting Bereitstellung von Exporten und Rückflüssen an operative Systeme (z. B. Kampagnenselektionen für das CRM) Mitarbeit an Entwicklungspipeline und CI/CD, Rollen und Berechtigungen, Data Catalog und Lineage Dokumentation, Runbooks und Wissenstransfer im Tandem mit dem Kundenteam Anforderungen Mehrjährige Erfahrung als Data Engineer, idealerweise im Aufbau von Data-Warehouse- oder Lakehouse-Lösungen Sehr gute Kenntnisse in Databricks, PySpark/Spark, SQL und Delta Lake Praxis mit Databricks Workflows bzw. Azure Data Factory und weiteren Azure-Datenservices Erfahrung in Datenmodellierung und Historisierung (Data Vault und/oder dimensionale Modellierung) Kenntnisse in Git, CI/CD und automatisiertem Testing von Datenpipelines Erfahrung mit KI-gestützter Entwicklung (z. B. Coding-Assistenten, agentische Workflows) von Vorteil Erfahrung mit Quellsystemen und Daten im Versicherungsumfeld von Vorteil Freude an Wissensvermittlung und Zusammenarbeit im gemischten Team Databricks- oder Azure-Data-Engineer-Zertifizierung von Vorteil Verhandlungssichere Deutsch- und gute Englischkenntnisse Generelle Rahmenbedingungen Pensum: 100 % Start: Anfang November 2026 Dauer: bis 31.03.2027 mit Option auf Verlängerung (Folgephasen geplant bis Ende 2028) Arbeitsort: Großraum Frankfurt am Main (Deutschland) Onsite/Remote: In den ersten 2–3 Monaten hoher Onsite-Anteil (3–4 Tage pro Woche), danach ca.

More jobs like this

Remote Data Engineer jobs

Looking for something similar?

Leave your email and we'll alert you when matching jobs appear.

Don't apply unprepared

We research who's interviewing you, tailor your CV and rehearse you live — first one free.