
Upvanta sp. z o.o.
Data Quality Engineer (remote) – projektowanie i wdrażanie procesów kontroli jakości danych, automatyzacja w Airflow, testy w Pythonie i dbt, walidacja w Snowflake, praca z AWS (S3, Batch, Kinesis, Firehose, Lambda) oraz GitLab; wymagana znajomość SQL, Snowflake, Airflow, Python, dbt; umowa B2B, pełny etat.
Data Quality EngineerPraca zdalna Poszukujemy doświadczonego Data Quality Engineera, który będzie odpowiadał za zapewnienie spójności, integralności i wiarygodności danych w środowisku opartym o Snowflake.Rola koncentruje się na projektowaniu, wdrażaniu i automatyzacji procesów kontroli jakości danych – od momentu pozyskania ze źródeł, przez warstwy transformacyjne, aż po analityczne i raportowe.Będziesz współpracować z Data Engineerami, analitykami oraz zespołami biznesowymi, monitorując przepływy danych, identyfikując anomalie oraz rekomendując usprawnienia procesów. Zakres obowiązkówProjektowanie i implementacja procesów monitorowania oraz poprawy jakości danych (reguły DQ, testy porównawcze).Tworzenie struktur i przepływów wspierających audyt i kontrolę danych.Walidacja zgodności danych na wszystkich etapach przetwarzania.Automatyzacja procesów monitorowania jakości z wykorzystaniem Airflow.Implementacja testów, walidacji i porównań danych w Pythonie oraz dbt.Monitorowanie przepływów danych, identyfikacja anomalii i rekomendowanie usprawnień.Współpraca z zespołami technicznymi i biznesowymi w języku polskim i angielskim. WymaganiaDoświadczenie w pracy z hurtowniami danych w chmurze (preferowane Snowflake).Praktyka w projektach Data Quality (reguły DQ, walidacje, porównania danych).Bardzo dobra znajomość SQL.Biegłość w Snowflake (praca z danymi, monitorowanie, walidacje).Doświadczenie z Airflow.Znajomość Python w kontekście procesów DQ.Praktyczne doświadczenie z dbt (testy, modele, walidacje).Znajomość usług AWS (S3, Batch, Kinesis, Firehose, Lambda).Umiejętność pracy z GitLab (wersjonowanie, CI/CD).
Zaloguj się, aby zobaczyć pełny opis oferty
| Opublikowana | 9 dni temu |
| Wygasa | za około 2 miesiące |
| Rodzaj umowy | B2B |
| Źródło |
Nie znaleziono ofert, spróbuj zmienić kryteria wyszukiwania.