Data Quality Engineer

Data Quality Engineer (Praca zdalna)

Upvanta sp. z o.o.

Wrocław +4 więcej
B2B
💼 B2B
📊 Data Quality Engineer
Snowflake
🤖 Airflow
🐍 Python
dbt
SQL
☁️ AWS
GitLab

Podsumowanie

Data Quality Engineer – projektowanie i wdrażanie procesów kontroli jakości danych w Snowflake, automatyzacja w Airflow, testy w Pythonie i dbt, współpraca z zespołami technicznymi i biznesowymi. Wymagana znajomość SQL, Snowflake, Airflow, Python, dbt, AWS oraz GitLab. Praca zdalna, lokalizacja Gdańsk.

Słowa kluczowe

Data Quality EngineerSnowflakeAirflowPythondbtSQLAWSGitLab

Opis stanowiska

Poszukujemy doświadczonego Data Quality Engineera, który będzie odpowiadał za zapewnienie spójności, integralności i wiarygodności danych w środowisku opartym o Snowflake.Rola koncentruje się na projektowaniu, wdrażaniu i automatyzacji procesów kontroli jakości danych – od momentu pozyskania ze źródeł, przez warstwy transformacyjne, aż po analityczne i raportowe.Będziesz współpracować z Data Engineerami, analitykami oraz zespołami biznesowymi, monitorując przepływy danych, identyfikując anomalie oraz rekomendując usprawnienia procesów. Zakres obowiązków Projektowanie i implementacja procesów monitorowania oraz poprawy jakości danych (reguły DQ, testy porównawcze). Tworzenie struktur i przepływów wspierających audyt i kontrolę danych. Walidacja zgodności danych na wszystkich etapach przetwarzania. Automatyzacja procesów monitorowania jakości z wykorzystaniem Airflow. Implementacja testów, walidacji i porównań danych w Pythonie oraz dbt. Monitorowanie przepływów danych, identyfikacja anomalii i rekomendowanie usprawnień. Współpraca z zespołami technicznymi i biznesowymi w języku polskim i angielskim.  Wymagania Doświadczenie w pracy z hurtowniami danych w chmurze (preferowane Snowflake). Praktyka w projektach Data Quality (reguły DQ, walidacje, porównania danych). Bardzo dobra znajomość SQL. Biegłość w Snowflake (praca z danymi, monitorowanie, walidacje). Doświadczenie z Airflow. Znajomość Python w kontekście procesów DQ. Praktyczne doświadczenie z dbt (testy, modele, walidacje). Znajomość usług AWS (S3, Batch, Kinesis, Firehose, Lambda). Umiejętność pracy z GitLab (wersjonowanie, CI/CD).

Zaloguj się, aby zobaczyć pełny opis oferty

Wyświetlenia: 4
Opublikowana28 dni temu
Wygasaza około 2 miesiące
Rodzaj umowyB2B
Źródło
Logo

Podobne oferty, które mogą Cię zainteresować

Na podstawie "Data Quality Engineer"

Nie znaleziono ofert, spróbuj zmienić kryteria wyszukiwania.