- Apache Ariflow 2
- Apache Spark 3 (YARN oraz K8S) z wykorzystaniem PySpark
- Visual Studio Code oraz JupyterHub
- Microsoft SQL Server 2019
- Pracujemy w metodyce Kanban
- Realizujemy swoje projekty holistycznie mając pełną kontrolę nad architekturą rozwiązania
- Wspieramy się standaryzacją rozwiązań i automatyzacją generowania kodu w celu budowania środowiska typu low-code
- Przywiązujemy uwagę do zarządzania metadanymi oraz automatycznego budowania dokumentacji przepływu danych (data-lineage)
- Tworzymy innowacyjne rozwiązania/produkty - wsparcie biznesu
- Analiza źródeł danych (data discovery) oraz automatyzacja procesu ich pozyskiwania do systemów analitycznych
- Integracja z wewnętrznymi i zewnętrznymi interfejsami API (rest api, odata)
- Wsparcie projektów migracyjnych z rozwiązań MS Integration Services do Spark + Airflow
- Budowanie struktur danych w relacyjnej hurtowni danych (MS SQL) oraz Data Lake )
- Testowanie i dokumentowanie wykonywanych prac programistycznych.
- Monitorowanie procesów przetwarzania danych i reagowanie na potencjalne błędy
- Rozwijanie narzędzi automatyzujących prace programistyczne wewnętrzna biblioteka standardowa, aplikacje konsolowe, cookiecutter oraz jinja templates)
- Bardzo dobra znajomość programowania w Python (v – min 2 lata doświadczenia
- Dobra znajomość procesowania danych w Python z wykorzystaniem Apache Spark lub Pandas/Dask – min rok doświadczenia
- Dobra znajomość pracy z relacyjną bazą danych (preferowana MS SQL) poprzez interfejs pyodbc lub sqlalchemy
- Podstawowa znajomość Apache Airflow 2+
- Znajomość i umiejętność implementacji OOP oraz SOLID,
- Umiejętność pisania testów jednostkowych i integracyjnych - TDD, znajomość frameworka pytest
- Umiejętność posługiwania się systemem kontroli wersji GIT, znajomość zasad git-flow
- Screening z HR
- Spotkanie z Kierownikiem Zespołu i HR
- Dzwonimy do Ciebie z informacją zwrotną, niezależnie od naszej decyzji.
-
Data Engineer
5 dni temu
USP Zdrowie Poleczki Business Park, Warszawa, Polska W pełnym wymiarze godzinData Engineer (Warszawa, Wrocław) · Twój zakres obowiązków: · Współpraca z zespołami analitycznymi i biznesowymi w celu udoskonalenia modeli danych, które zasilają narzędzia analizy biznesowej, zwiększając dostępność danych i wspierając podejmowanie decyzji opartych na danych · P ...
-
Data Engineer
2 tygodnie temu
Simplicity Recruitment Warsaw, Polska W pełnym wymiarze godzinTechnologies-expected : Python Scala Java Docker Kubernetes My SQL Oracle Postgre SQL Mongo DB Cassandra AWS GCP Azure responsibilities : Opracowywanie i wdrażanie strategii danych oraz poszczególnych komponentów, zapewniając ich zgodność z ogólnymi celami biznesowymi firmy. · Od ...
-
Data Engineer @
1 tydzień temu
Finture Sp. Zo.o Warsaw, Polska W pełnym wymiarze godzinDla naszego klienta, dużego polskiego banku, poszukujemy kandydatów na stanowisko Data Engineer do wsparcia projektu w trybie hybrydowym. · Oferujemy Stabilne zatrudnienie w firmie o dużym potencjale Przyjazną atmosferę pracy w zespole, który lubi ze sobą pracować, dzieli się wie ...
-
Data Engineer
1 tydzień temu
Finture Sp. z o.o. Chmielna, Warszawa, Polska W pełnym wymiarze godzinDla naszego klienta, dużego polskiego banku, poszukujemy kandydatów na stanowisko Data Engineer do wsparcia projektu w trybie hybrydowym. · Twój zakres obowiązków · Analiza danych oraz przygotowywanie dla nich modeli logicznych i fizycznych · Projektowanie i realizacja rozwiązań ...
-
Data Engineer
1 tydzień temu
CGI Warsaw, Polska W pełnym wymiarze godzinPosition Description: · Obecnie poszukujemy doświadczonego Data Engineera, który będzie odpowiedzialny za projektowanie, tworzenie i utrzymanie infrastruktury danych. Osoba na tym stanowisku będzie zaangażowana w budowę i zarządzanie rozwiązaniami opartymi na technologiach Pytho ...
-
Data Engineer @
3 godziny temu
PKO Finat Sp. z o.o. Warsaw, PolskaPoszukujemy 2 osób na stanowisko Data Engineer. · Forma współpracy: B2B · Miejsc pracy: hybryda - 1 raz w tygodniu widzimy się w biurze w Warszawie przy Chmielnej 89 · Bardzo dobra znajomość i co najmniej kilkuletnie doświadczenia jako develeoper Data Enegineer : · - w obszarze p ...
-
Data Engineer
4 dni temu
SCALO Sp. z o.o. Warsaw, PolskaJesteśmy firmą technologiczną. · Realizujemy projekty. Budujemy zespoły. Zapewniamy specjalistów do projektów. · Za pomocą technologii wspieramy wzrost biznesowy naszych Klientów oraz tworzymy przestrzeń do ciągłego rozwoju naszego zespołu. Nasze Center of Excellence skupia naj ...
-
Data Engineer @
6 dni temu
Pko Finat Sp. Z O.o. Warsaw, Polska W pełnym wymiarze godzinPoszukujemy 2 osób na stanowisko Data Engineer. · Forma współpracy: B2 B Miejsc pracy: hybryda - 1 raz w tygodniu widzimy się w biurze w Warszawie przy Chmielnej 89 Bardzo dobra znajomość i co najmniej kilkuletnie doświadczenia jako develeoper Data Enegineer : - w obszarze proces ...
-
Data Engineer
1 tydzień temu
Itfs Sp. Z O.o. Warsaw, Polska W pełnym wymiarze godzinData Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane Big Querry Mile widziane Dataflow Python O projekcie Miejsce pracy: 100% zdalnie Start: ASAP Forma współpracy: B2 B z ITFS, Wynagrodzenie: PLN netto+VAT/h Branża: technologiczna Twój zakres obowiązków Oce ...
-
Data Engineer
6 dni temu
Next Technology Professionals Warsaw, Polska· Dla naszego klienta poszukujemy kandydatów na stanowisko: · Data Engineer (Mid/Senior) · Projekt: Naszym klientem jest niemiecka firma, która działa na rzecz doskonalenia technologii medycznych. Wykorzystuje zaawansowane metody inżynieryjne i współpracuje z ekspertami z dziedz ...
-
Data Engineer
1 tydzień temu
SCALO Sp. z o.o. Warsaw, PolskaJesteśmy firmą technologiczną. · Realizujemy projekty. Budujemy zespoły. Zapewniamy specjalistów do projektów. · Za pomocą technologii wspieramy wzrost biznesowy naszych Klientów oraz tworzymy przestrzeń do ciągłego rozwoju naszego zespołu. Nasze Center of Excellence skupia naj ...
-
Data Engineer
1 tydzień temu
Next Technology Professionals Warsaw, Polska· Dla naszego klienta poszukujemy kandydatów na stanowisko: · Data Engineer · Projekt: Naszym klientem jest brytyjska firma, która specjalizująca się w zaawansowanej analizie danych i doradztwie w zakresie transformacji cyfrowej. · Stack technologiczny: ETL, SQL, Python, Snowfla ...
-
Data Engineer
6 dni temu
Scalo Sp. Z O.o. Warsaw, Polska W pełnym wymiarze godzinTechnologies-expected : Python Scala SQL technologies-optional : Java Confluence Jira Kafka responsibilities : uczestnictwo w projekcie dot. · rozwoju i utrzymania systemów przetwarzania danych w departamencie hurtowni danych. · Przygotowanie środowisk do procesu migracji na środ ...
-
Data Engineer @
1 tydzień temu
Squareone Warsaw, Polska W pełnym wymiarze godzinMinimum 3-5 lat doswiadczenia w roli inzyniera danych Doswiadczenie w pracy z bazami danych np. · Teradata, Oracle, Hive, Big Query, Doswiadczenie w pracy z Google Cloud Platform, w szczególnosci z uslugami takimi jak Big Query, Dataproc, Pub/Sub, Google Cloud Storage itp. · Znaj ...
-
Data Engineer
5 dni temu
Nice To Fit You Warsaw, PolskaData Engineer · Zakres obowiązków: · Projektowanie, implementacja i utrzymanie infrastruktury danych na platformie Microsoft Azure oraz Google Cloud Platform; · Tworzenie oraz zarządzanie procesami ETL (integracji danych z wielu źródeł), między chmurami; · Skalowanie rozwiązań Bi ...
-
Data Engineer
4 dni temu
IT Squad Warsaw, PolskaKIM JESTEŚMY · Jesteśmy firmą o profilu wdrożeniowo – doradczym. Lubimy angażować się w projekty 'rescue IT' , w których możesz nam pomóc. Mamy 'lekkie' procesy firmowe (adekwatne do skali firmy ~100 FTE) oraz szybką ścieżkę decyzyjną. Stawiamy na przyjazne środowisko pracy w zgr ...
-
Data Engineer
6 dni temu
Dorwij Nerda Sp. z o. o. Warsaw, PolskaData Engineer · Zdalnie · Zespół do którego rekrutujemy potrzebuje dwóch doświadczonych graczy, którzy dołączą do "drużyny pierścienia" pracującej dla branży biotechnologiczej. Osoba na tym stanowisku będzie pracować nad pełnym stackiem technologicznym; od obszarów danych i ich p ...
-
Data Engineer
6 dni temu
Jellytech Warsaw, Polska W pełnym wymiarze godzinTechnologies-expected : Python Apache Spark SQL Microsoft Azure about-project : Dołączając do Zespołu będziesz miał okazję pracować w rozwojowym projekcie z branży biomedycznej związanym z produkcją kartridży do urządzeń, które, m.in. · odwirowują DNA. · Język komunikacji w proje ...
-
Data Engineer
2 tygodnie temu
Unimot Energia I Gaz Sp. Z O.o. Warsaw, Polska W pełnym wymiarze godzinTechnologies-expected : SQL about-project : Poszukujemy Data Engineera z doświadczeniem w obszarze ETL, który będzie odpowiedzialna za projektowanie, implementację i utrzymanie infrastruktury danych. · Osoba na tym stanowisku będzie pracować nad procesami gromadzenia, przetwarzan ...
-
Data Engineer
1 tydzień temu
Neontri Warsaw, PolskaCześć, Z tej strony Neontri - jesteśmy firmą liczącą około 120 osób, która specjalizuje się w 2 obszarach: · -tworzymy systemy, które zlecają nam nasi Klienci (najczęściej tworzymy coś od zera, albo dodajemy w pełni nowe funkcjonalności) głównie z obszaru: finansowego, bankowego ...
Data Engineer - -, Warszawa, Polska - Kaczmarski Group
Opis
Jesteśmy stabilną i znaną na rynku firmą z Wrocławia. Na co dzień stawiamy na przyjacielską, atmosferę i dobre relacje. Od pierwszego dnia zatrudnienia dbamy o Twój komfort i pomagamy Ci odnaleźć się w gronie Naszych pracowników. Pracując w Kaczmarski Group możesz liczyć na wsparcie i intensywny rozwój na każdym etapie swojej kariery.
Narzędzia, z których korzystamy:
i więcej :)
Jak pracujemy w projektach?
Zakres obowiązków:
Wymagania:
Jak wygląda proces rekrutacyjny?
Jeżeli zainteresowaliśmy Ciebie powyższym opisem, to zapraszamy na wirtualną kawę na Teams ;)