Databricks Engineer

Hello World!

Jesteśmy The Codest - Międzynarodowa firma technologiczna z siedzibą w Polsce, dostarczająca globalne rozwiązania i projekty IT. Nasze podstawowe wartości opierają się na podejściu "Klienci i ludzie przede wszystkim", które priorytetowo traktuje potrzeby naszych klientów i środowisko współpracy dla naszych pracowników, umożliwiając nam dostarczanie wyjątkowych produktów i usług.

Nasza wiedza specjalistyczna koncentruje się na tworzenie stron internetowych, inżynieria chmury, DevOps i jakość.  Po wielu latach rozwijania własnego produktu - Yieldbird, który został uhonorowany prestiżową nagrodą Top25 Deloitte, doszliśmy do naszej misji: pomagać firmom technologicznym w tworzeniu wpływowych produktów i skalowaniu ich zespołów IT poprzez zwiększanie wydajności dostarczania IT. Dzięki naszemu bogatemu doświadczeniu w zakresie wyzwań związanych z rozwojem produktów, staliśmy się ekspertami w tworzeniu produktów cyfrowych i skalowaniu zespołów IT. 

Ale nasza podróż nie kończy się tutaj - chcemy kontynuować nasz rozwój. Jeśli dążysz do celu i szukasz nowych możliwości, dołącz do naszego zespołu! Czeka na Ciebie wzbogacające i oparte na współpracy środowisko, które wspiera Twój rozwój na każdym kroku.

Obecnie poszukujemy:

INŻYNIER DANYCH DATABRICKS

📈 Obowiązki użytkownika:

Będziesz miał okazję współtworzyć aplikację bankową dla jednej z wiodących grup finansowych w Japonii. Platforma jest wyposażona w moduły bankowe i funkcje zarządzania danymi, a także jest skierowana do klientów. Poszukujemy doświadczonego inżyniera Databricks do projektowania, budowania i zarządzania skalowalnymi rozwiązaniami i potokami danych przy użyciu Databricks. Będziesz ściśle współpracować z wielofunkcyjnymi zespołami, aby zapewnić niezawodność, dostępność i wydajność danych w celu zasilania inicjatyw analitycznych i analityki biznesowej.

• Doświadczenie z Medalion Architektura (brązowy, srebrny, złoty) dla domów nad jeziorem przy użyciu zoptymalizowanych wzorców wydajności
• Zbuduj silny ramy jakości danych z automatycznym testowaniem i monitorowaniem
• Wdrożenie Cechy jeziora Delta takie jak podróże w czasie, operacje próżniowe i porządkowanie Z
• Rozwijanie i utrzymywanie złożonych Rurociągi ETL/ELT codzienne przetwarzanie dużych zbiorów danych
• Projektowanie i wdrażanie Przepływy pracy CI/CD dla potoków danych przy użyciu Databricks Asset Bundles lub równoważnych narzędzi
• Utwórz Rozwiązania do przetwarzania danych w czasie rzeczywistym i wsadowym ze strumieniowaniem strukturalnym i tabelami Delta Live
• Optymalizacja Oferty pracy Spark efektywność kosztową i wydajność, wykorzystując automatyczne skalowanie klastra i zarządzanie zasobami
• Rozwój niestandardowe integracje z interfejsami API Databricks i systemami zewnętrznymi
• Skalowalność projektu architektury danych przy użyciu Unity Catalog, Delta Lake i Apache Spark
• Ustanowienie architektury siatki danych z zarządzaniem i śledzeniem pochodzenia

Kluczowe wymagania:

• Ponad 6 lat doświadczenia w dziedzinie inżynierii danych, z dużym doświadczeniem w projektowaniu i wdrażaniu potoków danych klasy produkcyjnej oraz przepływów pracy ETL/ELT
• Biegłość w Python, PySpark i SQL
• Rozległe praktyczne doświadczenie z Usługi AWS takich jak Glue, Lambda, Redshift i S3.
• Solidne doświadczenie w narzędzia do zarządzania danymiw tym platformy takie jak Unity Catalog i AWS Sagemaker Unified Studio
• Udokumentowane doświadczenie w inicjatywy migracji danych i modernizacja starszych systemów
• Komunikatywna znajomość języka angielskiego (projekt jest realizowany w międzynarodowym zespole)

➕ Miło mieć: 

• Certyfikowany profesjonalny inżynier danych Databricks (lub równoważny certyfikat)
• Doskonałe umiejętności komunikacji i pracy zespołowej
• Silne zdolności analitycznego myślenia i rozwiązywania problemów
• Doświadczenie z narzędziami do konteneryzacji i orkiestracji (np. Docker, Kubernetes) będzie dodatkowym atutem.

Nasza obietnica (czego możesz od nas oczekiwać):

• 27000-34000 PLN na kontrakcie B2B
• 100% praca zdalna (ale mamy biura w Krakowie i Warszawie i chętnie się tam spotkamy od czasu do czasu 😉)
• 300 PLN do wykorzystania na naszej platformie benefitowej Worksmile - karty podarunkowe, usługi medyczne, sportowe itp.
• Nasza umowa B2B zawiera postanowienia, które umożliwiają uzyskanie wsparcia IP BOX
• Imprezy integracyjne, możliwości edukacyjne i wiele więcej...
• Wyjątkowa okazja, aby przenieść swoją karierę na wyższy poziom - szukamy ludzi, którzy chcą wywierać wpływ. Masz pomysły, chcemy je usłyszeć!

Proces rekrutacji:

• 30-minutowa rozmowa kwalifikacyjna online z naszym rekruterem
• 45min-1h rozmowy technicznej z jednym z naszych inżynierów
• 1-godzinna rozmowa z liderem zespołu
• Oferta

Pytania, spostrzeżenia? Zachęcamy do kontaktu z naszym zespołem rekrutacyjnym:

[email protected]