Data Ingénieur H/F - 95

L'approche de Starclay au sein du Groupe Partenor se caractérise par une double compétence Métier et SI ; mettre les utilisateurs au centre de tous les projets depuis la formalisation des besoins jusqu'à la formation de ces derniers.

Nous nous positionnons en tant qu'acteur clé dans les dispositifs d'amélioration continue notamment à travers l'IA générative.Dans le cadre du renforcement de nos équipes, nous recherchons des data ingénieurs pour intervenir chez nos clients grands comptes.

Votre poste consiste à maintenir en condition opérationnelle un socle Spark Hadoop développé en Java, tout en participant à un chantier de réécriture en Scala ou PySpark.

Vous aurez comme mission :

- Assurer le maintien en condition opérationnelle du socle Spark Hadoop existant, en assurant la fiabilité, la performance et l'évolutivité du système
- Participer à la réécriture des composants Java existants en Scala ou PySpark, en collaboration avec l'équipe de développement
- Concevoir, développer et mettre en oeuvre des solutions Big Data performantes et évolutives, en utilisant les technologies Hadoop, Spark, Scala et PySpark
- Optimiser les processus ETL et les pipelines de données pour assurer une intégration efficace des données à grande échelle
- Collaborer avec les équipes de développement logiciel pour intégrer les solutions Big Data dans les applications existantes
- Mettre en place des bonnes pratiques de développement, des tests et de la documentation pour garantir la qualité et la maintenabilité des solutions.