Mittlerer Dateningenieur in Niks

Wir suchen einen Ingenieur, der nicht nur ETL schreibt, sondern auch Dateninfrastruktur aufbaut: von Data Lakes und Cloud-Plattformen bis hin zu Streaming-Systemen und skalierbaren Pipelines.

MISSION:

Die „Datenbasis“ für die Unternehmen unserer Kunden aufbauen und optimieren. Ihre Mission geht über das bloße Verschieben von Daten hinaus. Sie stellen sicher, dass Pipelines nachhaltig, skalierbar und kosteneffektiv sind (FinOps). Du bist die Brücke zwischen Infrastruktur und Daten, übernimmst die Verantwortung für die technische Implementierung und hilfst bei der Gestaltung der Architektur moderner Datenplattformen.

WAS DU TUN WERDE:

• Entwerfen und implementieren Sie Pipelines zum Laden, Bereinigen und Transformieren von Daten in Data Lakes und Data Warehouses.
• Überwachen und optimieren Sie Pipelines aktiv, um Verbessern Sie die Produktivität und senken Sie die Kosten. Sie verstehen den Unterschied zwischen einer Abfrage, die „einfach funktioniert“, und einer effektiven Abfrage.
• Konfigurieren Sie Bereitstellungspipelines und verwalten Sie Umgebungsparameter mit IaC- (Terraform) und CI/CD-Tools.
• Implementieren Sie Datenqualitätsprüfungen (z. B. Great Expectations, DBT-Tests) und stellen Sie die Datenintegrität sicher.
• Kommunizieren Sie mit Stakeholdern, um Anforderungen zu klären, geben Sie technische Beratung und führen Sie Codeüberprüfungen für Nachwuchsingenieure durch.

WAS IST WICHTIG FÜR UNS:

• Python oder Scala (Advanced/OOP), SQL (Advanced).
• Databricks, Snowflake, BigQuery, Synapse, Redshift.
• Azure Data Factory (ADF), Airflow, Dagster.
Architektur).
• Erfahrung mit Databricks (Clustermanagement, Notebooks), Azure Data Factory (Pipelines, Datenflüsse) oder Snowflake.
• Gute Kenntnisse in Python (OOP, funktionale Programmierung) und starke SQL-Kenntnisse für komplexe Transformationen.
• Praktische Erfahrung mit mindestens einer großen Cloud-Plattform (AWS, GCP, Azure) und seine Datendienste (z. B. Kinesis/Lambda, Dataflow/BigQuery, Synapse).
• Grundlegendes Verständnis von Infrastructure as Code (Terraform). Die Fähigkeit, Infrastrukturressourcen unabhängig bereitzustellen und zu ändern.
• Die Fähigkeit, technische Lösungen direkt mit Kunden und dem Team zu kommunizieren und zu argumentieren.

WIRD EIN PLUS:

• Erfahrung in der Einrichtung komplexer Module in Terraform oder Pulumi.
• SPraktische Erfahrung mit Delta Lake- oder Apache Iceberg-Funktionen (Time Travel, Schema Evolution).
• Erfahrung in der Datenmodellierung für NoSQL-Datenbanken (MongoDB, DynamoDB).

WAS SIE ERHALTEN:

• Wettbewerbsfähige Vergütung nach Erfahrung und Fachwissen.
• Einfluss Technologieauswahl, Architektur und Prioritäten.
• Starkes Umfeld von Ingenieuren, Architekten und Analysten.
• Moderner Stack: Spark, Kafka, Snowflake, Databricks, Airflow, dbt, Docker.
• Karriereverlauf mit transparenten Bewertungen und Wachstumsplan.
• Best Practices: Codeüberprüfung, CI/CD, Pipeline-Tests.
• Herausforderungen – Big Data, Echtzeit-Streams, komplexe Integration.
• Flexibilität – Remote-First und Work-Life-Balance.
• Rotation zwischen Projekten und Domänen.
• Entwicklung - Zertifizierungen, Plattformen, Wissensaustausch.
• Internationalität - globale Kunden und multinationale Teams.

Treten Sie NIX bei – und helfen Sie uns beim Aufbau von Datenarchitekturen, die die Zukunft des Geschäfts definieren.