Ingénieur Databricks

🌍 Hello World !

Nous sommes The Codest - Entreprise internationale de logiciels technologiques avec des centres technologiques en Pologne, fournissant des solutions et des projets informatiques globaux. Nos valeurs fondamentales reposent sur l'approche "Customers and People First" qui donne la priorité aux besoins de nos clients et à un environnement de collaboration pour nos employés, ce qui nous permet de fournir des produits et des services exceptionnels.

Notre expertise se concentre sur développement web, ingénierie en nuage, DevOps et qualité.  Après de nombreuses années de développement de notre propre produit - Yieldbird, qui a été récompensé par le prestigieux prix Top25 Deloitte, nous sommes arrivés à notre mission : aider les entreprises technologiques à créer des produits à fort impact et à développer leurs équipes informatiques en stimulant la performance de la livraison informatique. Grâce à notre expérience approfondie des défis liés au développement de produits, nous sommes devenus des experts en matière de création de produits numériques et d'évolution des équipes informatiques. 

Mais notre voyage ne s'arrête pas là - nous voulons poursuivre notre croissance. Si vous êtes motivé et à la recherche de nouvelles opportunités, rejoignez notre équipe ! Ce qui vous attend, c'est un environnement enrichissant et collaboratif qui favorise votre développement à chaque étape.

Nous recherchons actuellement :

INGÉNIEUR DE DONNÉES DATABRICKS

📈 Vos responsabilités:

Vous aurez l'occasion de contribuer à la création d'une application bancaire pour l'un des principaux groupes financiers du Japon. La plateforme est équipée de modules bancaires et de fonctionnalités de gestion de données, et elle est également orientée vers le client. Nous recherchons un ingénieur Databricks expérimenté pour concevoir, construire et gérer des solutions de données évolutives et des pipelines en utilisant Databricks. Vous travaillerez en étroite collaboration avec des équipes interfonctionnelles pour garantir la fiabilité, l'accessibilité et l'efficacité des données afin d'alimenter les initiatives d'analyse et de veille stratégique.

• Expérience avec Médaillon Architecture (Bronze, Argent, Or) pour les maisons de lac utilisant des modèles de performance optimisés
• Construire fort cadres de qualité des données avec des tests et des contrôles automatisés
• Mettre en œuvre Caractéristiques du lac Delta comme le voyage dans le temps, les opérations sous vide et l'ordre Z
• Élaborer et tenir à jour des Pipelines ETL/ELT le traitement quotidien d'ensembles de données à grande échelle
• Conception et mise en œuvre Flux de travail CI/CD pour les pipelines de données à l'aide de Databricks Asset Bundles ou d'outils équivalents
• Créer solutions de traitement des données en temps réel et par lots avec le streaming structuré et les tables Delta Live
• Optimiser Offres d'emploi Spark pour la rentabilité et la performance, en tirant parti de la mise à l'échelle automatique des clusters et de la gestion des ressources
• Développer intégrations personnalisées avec les API de Databricks et les systèmes externes
• Conception évolutive les architectures de données en utilisant Unity Catalog, Delta Lake et Apache Spark
• Établir architectures de maillage de données avec la gouvernance et le suivi de la lignée

🔑 Exigences clés :

• 6 ans d'expérience ou plus en ingénierie des données, avec une solide expérience de la conception et du déploiement de pipelines de données et de flux de travail ETL/ELT de niveau production.
• Compétence en Python, PySpark et SQL
• Vaste expérience pratique avec Services AWS tels que Glue, Lambda, Redshift et S3
• Solide expérience dans les domaines suivants outils de gouvernance et de gestion des donnéesLes applications de l'entreprise, y compris les plateformes telles que Unity Catalog et AWS Sagemaker Unified Studio, peuvent être utilisées dans le cadre d'un projet de recherche.
• Expérience avérée dans les domaines suivants initiatives de migration des données et moderniser les systèmes existants
• Compétences communicatives en anglais (le projet se déroule au sein d'une équipe internationale)

C'est bien de l'avoir : 

• Ingénieur de données professionnel certifié Databricks (ou certification équivalente)
• Excellentes aptitudes à la communication et au travail en équipe
• Forte capacité de réflexion analytique et de résolution de problèmes
• Une expérience des outils de conteneurisation et d'orchestration (par exemple, Docker, Kubernetes) est considérée comme un avantage.

📜 Notre promesse (ce que vous pouvez attendre de nous) :

• 27000-34000 PLN pour un contrat B2B
• 100% travail à distance (mais nous avons des bureaux à Cracovie et à Varsovie et nous sommes heureux de nous y retrouver de temps en temps 😉).
• 300 PLN à utiliser sur notre plateforme d'avantages, Worksmile - cartes cadeaux, services médicaux, sports, etc.
• Notre contrat B2B contient des dispositions qui vous permettent d'obtenir le soutien d'IP BOX.
• Événements d'intégration, possibilités de formation et bien plus encore...
• Une occasion unique de faire progresser votre carrière - nous recherchons des personnes qui veulent avoir un impact. Vous avez des idées, nous voulons les entendre !

📌 Processus de recrutement :

• Appel de présélection de 30 minutes en ligne avec notre recruteur
• 45min-1h d'appel technique avec l'un de nos ingénieurs
• 1h d'appel avec le chef d'équipe
• Offre

Des questions, des idées ? N'hésitez pas à contacter notre équipe de recrutement :

[email protected]