Databricks Engineer

Hello World!

Jesteśmy The Codest –  International Tech Software Company with tech hubs in Poland delivering global IT solutions and projects. Our core values lie in “Customers and People First” approach that prioritises the needs of our customers and a collaborative environment for our employees, enabling us to deliver exceptional products and services.

Nasza wiedza specjalistyczna koncentruje się na tworzenie stron internetowych, inżynieria chmury, DevOps i jakość.  Po wielu latach rozwijania własnego produktu - Yieldbird, który został uhonorowany prestiżową nagrodą Top25 Deloitte, doszliśmy do naszej misji: pomagać firmom technologicznym w tworzeniu wpływowych produktów i skalowaniu ich zespołów IT poprzez zwiększanie wydajności dostarczania IT. Dzięki naszemu bogatemu doświadczeniu w zakresie wyzwań związanych z rozwojem produktów, staliśmy się ekspertami w tworzeniu produktów cyfrowych i skalowaniu zespołów IT. 

Ale nasza podróż nie kończy się tutaj - chcemy kontynuować nasz rozwój. Jeśli dążysz do celu i szukasz nowych możliwości, dołącz do naszego zespołu! Czeka na Ciebie wzbogacające i oparte na współpracy środowisko, które wspiera Twój rozwój na każdym kroku.

Obecnie poszukujemy:

DATABRICKS DATA ENGINEER

📈 Obowiązki użytkownika:

Here, you will have an opportunity to contribute to a banking app for one of the leading financial groups in Japan. The platform is equipped with bank modules and data management features and it is customer-facing as well. We are seeking an experienced Databricks Engineer to design, build, and manage scalable data solutions and pipelines using Databricks. You’ll work closely with cross-functional teams to ensure data is reliable, accessible, and efficient to power analytics and business intelligence initiatives.

• Experience with Medallion Architecture (Bronze, Silver, Gold) for lakehouses using optimized performance patterns
• Build strong data quality frameworks with automated testing and monitoring
• Wdrożenie Delta Lake features such as time travel, vacuum operations, and Z-ordering
• Develop and maintain complex ETL/ELT pipelines processing large-scale datasets daily
• Design and implement CI/CD workflows for data pipelines using Databricks Asset Bundles or equivalent tools
• Utwórz real-time and batch data processing solutions with Structured Streaming and Delta Live Tables
• Optimize Spark jobs for cost efficiency and performance, leveraging cluster auto-scaling and resource management
• Develop custom integrations with Databricks APIs and external systems
• Design scalable data architectures using Unity Catalog, Delta Lake, and Apache Spark
• Establish data mesh architectures with governance and lineage tracking

Kluczowe wymagania:

• 6+ years of experience in data engineering, with a strong track record of designing and deploying production-grade data pipelines and ETL/ELT workflows
• Proficiency in Python, PySpark, and SQL
• Extensive hands-on experience with AWS services such as Glue, Lambda, Redshift, and S3
• Solid background in data governance and management tools, including platforms like Unity Catalog and AWS Sagemaker Unified Studio
• Proven experience in data migration initiatives and modernizing legacy systems
• Communicative English language skills (the project is in an international team)

➕ Miło mieć: 

• Databricks Certified Professional Data Engineer (or equivalent certification)
• Excellent communication and teamwork skills
• Strong analytical thinking and problem-solving ability
• Experience with containerization and orchestration tools (e.g., Docker, Kubernetes) is considered an advantage

Nasza obietnica (czego możesz od nas oczekiwać):

• 27000-34000 PLN on B2B contract
• 100% praca zdalna (ale mamy biura w Krakowie i Warszawie i chętnie się tam spotkamy od czasu do czasu 😉)
• 300 PLN do wykorzystania na naszej platformie benefitowej Worksmile - karty podarunkowe, usługi medyczne, sportowe itp.
• Nasza umowa B2B zawiera postanowienia, które umożliwiają uzyskanie wsparcia IP BOX
• Imprezy integracyjne, możliwości edukacyjne i wiele więcej...
• Wyjątkowa okazja, aby przenieść swoją karierę na wyższy poziom - szukamy ludzi, którzy chcą wywierać wpływ. Masz pomysły, chcemy je usłyszeć!

Proces rekrutacji:

• 30-minutowa rozmowa kwalifikacyjna online z naszym rekruterem
• 45min-1h technical call with one of our engineers
• 1h call with the team leader
• Oferta

Pytania, spostrzeżenia? Zachęcamy do kontaktu z naszym zespołem rekrutacyjnym:

[email protected]