Inżynier danych (Snowflake, dbt i Airflow)
Inżynier danych skupiony na niezawodności pipeline'ów i jakości danych. Prowadzi projekty w architekturze medalionowej na Airflow i dbt, z automatycznymi testami, wykrywaniem anomalii i kontrolowanymi backfillami. Ma na koncie kompletny ELT na Snowflake z procedurami składowanymi Snowpark i Streams & Tasks, a obecnie utrzymuje pipeline'y Microsoft Fabric dla platformy transportowej.
- Poziom
- Mid
- Doświadczenie
- 4–6 lat
- Lokalizacja
- Wietnam
- Języki
- Wietnamski (ojczysty), Angielski (średniozaawansowany, B1)
Wybrane projekty
- Technologie reklamowe (klient z Korei): utrzymanie pipeline'ów Airflow i dbt, które przenoszą logi urządzeń z widzeniem komputerowym do warstwy medalionowej w TimescaleDB; ponad 1 mln rekordów dziennie, z automatyczną kontrolą jakości i alertami o anomaliach.
- Transport (klient z Japonii): stabilizacja pipeline'ów danych rezerwacji przejazdów na Microsoft Fabric, z zastąpieniem pełnych przeładowań przyrostowymi upsertami i udokumentowanymi procedurami ponownego uruchamiania.
- Analityka sprzedaży: kompletny ELT na Snowflake z procedurami składowanymi Snowpark, kluczami zastępczymi, schematem gwiazdy i ładowaniem przyrostowym przez Streams & Tasks.
- Finanse (klient z Wietnamu): utrzymanie pipeline'ów ERP, księgowych i budżetowych z bramkami jakości w dbt, uzgadnianiem danych, notatkami z analizy przyczyn źródłowych i rozdzieleniem CI/CD na staging i produkcję.
Branże
Technologie reklamowe, Transport, Finanse
Wykształcenie
Licencjat (BSc), sztuczna inteligencja