Usiamo cookie tecnici e il registro anonimo delle visite di Zorky. Yandex Metrica (dati conservati su server in Russia) funziona solo con il tuo consenso. Non vendiamo mai dati. Ulteriori informazioni su cookie e statistiche.
Zorky è in modalità test: è tutto gratuito. Le offerte e le pagine delle aziende sono aperte a tutti; i link agli annunci e la tua selezione personale si aprono dopo la registrazione. Registrati →
← Tutte le offerte

Data Engineer - Databricks & Automation

Livello non indicato7000 SGD · periodo non indicatoSingapore, SGoggi
Analisi del mercato
📊 Data Engineering: stipendi e domanda sul mercato
Stack
Data Quality ChecksPySparkDesignPipeline ManagementEnsuring Data AccuracyAutomated Software TestingData EngineeringVersion Control SystemsPythonCI/CDintegrate Data sourcesBusiness Reporting
Dettagli
Practices
CI/CD
Mostra azienda e link
Gratis, dopo l'accesso.
Candidati
Apri l'azienda e il link qui sopra: la candidatura arriva direttamente nel sistema di selezione dell'azienda, senza intermediari.

Descrizione

Responsabilità

Key Responsibilities

Design, develop and maintain scalable ETL/ELT data pipelines using Databricks, Python, PySpark, SQL and Delta Lake.

Integrate data from multiple sources, including databases, APIs and files, with streaming ingestion where required.

Develop and maintain curated datasets and data models to support business reporting, analytics and AI applications.

Implement data quality checks, data validation, reconciliation and incremental data processing.

Monitor data pipelines, investigate failures, troubleshoot issues and ensure data accuracy and availability.

Optimise data processing performance, pipeline execution and compute utilisation.

Implement version control, automated testing, CI/CD and technical documentation.

Identify and automate repetitive data engineering and support activities.

Explore practical AI

Azienda e link per candidarti: dopo l'accesso. Accedi
I contatti del datore di lavoro (email/telefono/telegram) sono nascosti nell'anteprima pubblica.
Domanda urgente? Scrivi a @termdocs