Wir verwenden technische Cookies und das anonymisierte Besuchsprotokoll von Zorky. Yandex Metrica (Daten werden auf Servern in Russland gespeichert) läuft nur mit Ihrer Einwilligung. Wir verkaufen keine Daten. Mehr zu Cookies und Statistik.
Zorky läuft im Testmodus — alles ist kostenlos. Stellen und Unternehmensseiten sind für alle offen; Links zu den Anzeigen und Ihre persönliche Stellenauswahl gibt es nach der Registrierung. Registrieren →
← Alle Stellen

Data Engineer

Senior6.500 SGD · Zeitraum nicht angegebenSingapore, SGvor 2 T.
Markteinblicke
📊 Data Engineering: Gehälter und Nachfrage am Markt
Stack
ci/cdflinkgitlabjavakafkakubernetess3scalasparksql
Details
Erfahrung
ab 5 Jahren
Methoden
CI/CD
Unternehmen und Link anzeigen
Kostenlos, nach der Anmeldung.
Bewerben
Öffnen Sie oben das Unternehmen und den Link — Ihre Bewerbung geht direkt in das Recruiting-System des Unternehmens, ohne Vermittler.

Beschreibung

Job Overview

Design, develop and maintain data engineering solutions, including large-scale batch and streaming pipelines, distributed processing and containerized data workloads.

Aufgaben

Key Responsibilities

  • Design, develop and maintain ingestion, transformation and validation pipelines using Apache Spark, Apache Flink and Apache Kafka.
  • Implement distributed processing using Java or Scala and SQL, integrating data sources and S3-compatible object storage.
  • Maintain schemas, metadata, data lineage and data-quality controls across processing stages, supporting layered data processing where applicable.
  • Deploy and scale workloads on Kubernetes, and implement automated tests, GitLab CI/CD, monitoring and operational troubleshooting.
  • Implement checkpointing, restart recovery, retention and lifecycle controls.
  • Support high availability, backup, disaster recovery and inter-site synchronization in line with agreed requirements.

Requirements & Skills

  • 5–8 years of data engineering experience, including building and deploying large-scale data systems.
  • Strong hands-on experience designing batch and streaming pipelines using Apache Spark, Apache Flink and Apache Kafka.
  • Proficiency in Java or Scala for distributed data processing, together with SQL.
  • Experience deploying and scaling data workloads in containerised Kubernetes environments.
  • Experience with S3-compatible object storage, data-quality controls, schema and lineage management, checkpointing and recovery, GitLab and CI/CD practices.

How t

Vollständige Beschreibung, Unternehmen und Bewerbungslink — nach der Anmeldung. Anmelden
Kontaktdaten des Arbeitgebers (E-Mail/Telefon/Telegram) sind in der öffentlichen Vorschau ausgeblendet.
Dringende Frage? Schreiben Sie @termdocs