Używamy techniczne pliki cookie i zanonimizowany dziennik wizyt Zorky. Yandex Metrica (dane są przechowywane na serwerach w Rosji) działa tylko za Twoją zgodą. Nigdy nie sprzedajemy danych. Więcej o cookies i statystykach.
Zorky działa w trybie testowym — wszystko jest bezpłatne. Oferty i strony firm są dostępne dla wszystkich; linki do ogłoszeń i osobiste zestawienie ofert — po rejestracji. Zarejestruj się →
← Wszystkie oferty

Data Engineer - Databricks & Automation

Poziom nie podany7000 SGD · okres nie podanySingapore, SGdziś
Analityka rynku
📊 Data Engineering: wynagrodzenia i popyt na rynku
Stack
Data Quality ChecksPySparkDesignPipeline ManagementEnsuring Data AccuracyAutomated Software TestingData EngineeringVersion Control SystemsPythonCI/CDintegrate Data sourcesBusiness Reporting
Szczegóły
Praktyki
CI/CD
Pokaż firmę i link
Bezpłatnie, po zalogowaniu.
Aplikuj
Odkryj firmę i link powyżej — Twoja aplikacja trafia prosto do systemu rekrutacyjnego firmy, bez pośredników.

Opis

Obowiązki

Key Responsibilities

Design, develop and maintain scalable ETL/ELT data pipelines using Databricks, Python, PySpark, SQL and Delta Lake.

Integrate data from multiple sources, including databases, APIs and files, with streaming ingestion where required.

Develop and maintain curated datasets and data models to support business reporting, analytics and AI applications.

Implement data quality checks, data validation, reconciliation and incremental data processing.

Monitor data pipelines, investigate failures, troubleshoot issues and ensure data accuracy and availability.

Optimise data processing performance, pipeline execution and compute utilisation.

Implement version control, automated testing, CI/CD and technical documentation.

Identify and automate repetitive data engineering and support activities.

Explore practical AI

Firma i link do aplikacji — po zalogowaniu. Zaloguj się
Kontakty pracodawcy (e-mail/telefon/Telegram) są ukryte w publicznym podglądzie.
Pilne pytanie? Napisz @termdocs