Wir verwenden technische Cookies und das anonymisierte Besuchsprotokoll von Zorky. Yandex Metrica (Daten werden auf Servern in Russland gespeichert) läuft nur mit Ihrer Einwilligung. Wir verkaufen keine Daten. Mehr zu Cookies und Statistik.
Zorky läuft im Testmodus — alles ist kostenlos. Stellen und Unternehmensseiten sind für alle offen; Links zu den Anzeigen und Ihre persönliche Stellenauswahl gibt es nach der Registrierung. Registrieren →
← Alle Stellen

Senior Data Engineer

Seniorremote~$10K /moremoteheute
Markteinblicke
📊 Data Engineering: Gehälter und Nachfrage am Markt
Stack
airflowclouddagsterdbtgoogle cloudgoogle cloud platformllmpostgresqlprefectpythonsql
Details
Erfahrung
ab 5 Jahren
Unternehmen und Link anzeigen
Kostenlos, nach der Anmeldung.
Bewerben
Öffnen Sie oben das Unternehmen und den Link — Ihre Bewerbung geht direkt in das Recruiting-System des Unternehmens, ohne Vermittler.

Beschreibung

Über die Stelle

About the Role

Join a data and infrastructure team building a platform that transforms information from multiple sources into reliable, up-to-date company intelligence. You will own the platform end to end, from architecture and ingestion to production operations.

Aufgaben

What You'll Do

Design a multi-source platform for concurrent ingestion, event-driven processing, and orchestrated batch workflows.

Build reliable intake from provider APIs, webhooks, files, and web scraping, with rate limits and robust failure handling.

Orchestrate scheduled workflows and historical backfills using tools such as Airflow, Dagster, or Prefect.

Develop event-driven systems with messaging and task queues, including retries, dead-letter queues, and controlled replay.

Store original payloads in cloud storage and transform them with dbt into raw, standardized, and curated layers.

Implement idempotent upserts, data contracts, automated validation, pipeline tests, and monitoring for freshness and failures.

Design and optimize PostgreSQL schemas and loading patterns, and integrate provider enrichment and structured extraction using LLMs.

What We're Looking For

At least 5 years building and operating production data platforms, including multi-source ingestion and ownership from architecture through ongoing operation.

Production experience with workflow orchestration, including dependencies, retries, and recovery. Airflow is preferred; Dagster, Prefect, Temporal, or comparable tools are relevant.

Hand

Vollständige Beschreibung, Unternehmen und Bewerbungslink — nach der Anmeldung. Anmelden
Kontaktdaten des Arbeitgebers (E-Mail/Telefon/Telegram) sind in der öffentlichen Vorschau ausgeblendet.
Dringende Frage? Schreiben Sie @termdocs