Wir verwenden technische Cookies und das anonymisierte Besuchsprotokoll von Zorky. Yandex Metrica (Daten werden auf Servern in Russland gespeichert) läuft nur mit Ihrer Einwilligung. Wir verkaufen keine Daten. Mehr zu Cookies und Statistik.
Zorky läuft im Testmodus — alles ist kostenlos. Stellen und Unternehmensseiten sind für alle offen; Links zu den Anzeigen und Ihre persönliche Stellenauswahl gibt es nach der Registrierung. Registrieren →
← Alle Stellen

Senior Data Engineer

Senior8.000 SGD · Zeitraum nicht angegebenSingapore, SGvor 1 Wo.
Markteinblicke
📊 Data Engineering: Gehälter und Nachfrage am Markt
Stack
Data Quality ChecksRecovery ProceduresDistributed ProcessingApache SparkScalaKubernetesComputer ProficiencyMicrosoft SQL ServerData Quality AssuranceData LineageCI/CDApache Kafka
Details
Erfahrung
ab 5 Jahren
Methoden
CI/CD
Unternehmen und Link anzeigen
Kostenlos, nach der Anmeldung.
Bewerben
Öffnen Sie oben das Unternehmen und den Link — Ihre Bewerbung geht direkt in das Recruiting-System des Unternehmens, ohne Vermittler.

Beschreibung

Senior Data Platform Engineer - Spark / Flink / Kafka

Über die Stelle

About the role

Design and deliver large-scale batch and streaming data pipelines. Build reliable processing and storage flows, improve data quality and recovery, and support the operation of distributed data workloads in Kubernetes environments.

Aufgaben

Key responsibilities

Design and develop batch and streaming pipelines using Apache Spark, Apache Flink and Apache Kafka. Implement processing logic using Java or Scala and SQL. Deploy, scale and troubleshoot containerised data workloads on Kubernetes.

Build data-quality checks and manage schema, lineage, checkpointing and recovery. Integrate S3-compatible object storage and support pipeline delivery through GitLab and CI/CD practices.

Anforderungen

Requirements

5-8 years of data engineering experience, including delivery of large-scale data systems. Strong hands-on experience designing pipelines using Apache Spark, Apache Flink and Apache Kafka. Proficiency in Java or Scala for distributed processing, together with SQL.

Experience deploying and scaling data workloads on Kubernetes. Experience with S3-compatible storage, data-quality controls, schema and lineage management, checkpointing, recovery, GitLab and CI/CD. Comparable large-scale processing frameworks may be considered where transferable distributed-data-system capability is demonstrated.

Good to have SAFe and safety-critical or mission-critical data platforms. MinIO, layered bronze/silver/gold processing, metadata preservation and stora

Vollständige Beschreibung, Unternehmen und Bewerbungslink — nach der Anmeldung. Anmelden
Kontaktdaten des Arbeitgebers (E-Mail/Telefon/Telegram) sind in der öffentlichen Vorschau ausgeblendet.
Dringende Frage? Schreiben Sie @termdocs