Data Engineer (H/F)

Le rôle et son périmètre

Cette offre d'emploi concerne un poste de Data Engineer (H/F) au sein du pôle Data de la Direction Technique d'un grand groupe français. Le candidat sélectionné aura pour mission principale le maintien en conditions opérationnelles d'une plateforme Datalake, en assurant la gestion des incidents et des demandes des projets et utilisateurs.

Il participera également à la mise en œuvre et à l'automatisation de nouvelles solutions, réalisera les mises en production, fera évoluer et améliorer les outils d'exploitation, informera et accompagnera les utilisateurs de la plateforme, et assurera le suivi de son activité par des bilans mensuels des tickets traités et des points bimensuels sur l'avancement des projets.

• Maintenir en conditions opérationnelles une plateforme Datalake
• Traiter les incidents et répondre aux demandes des projets et utilisateurs
• Mise en œuvre et automatisation de nouvelles solutions
• Réalisation des mises en production
• Évolution et amélioration des outils d'exploitation
• Informer et accompagner les utilisateurs de la plateforme
• Suivi de l'activité par bilans mensuels et points bimensuels

Responsabilités de développement

• Gestion des incidents et des demandes d'exploitation
• Mise en œuvre et automatisation de nouvelles solutions
• Réalisation des mises en production
• Amélioration continue des outils d'exploitation

Profil recherché

Le candidat doit disposer de solides expériences dans le maintien en conditions opérationnelles d'une plateforme en production. Une formation spécifique n'est pas exigée, mais une expérience significative dans les domaines du Big Data et des environnements Unix/Linux est nécessaire.

Les compétences en communication et en sens du service sont également requises pour accompagner efficacement les utilisateurs de la plateforme.

• Solides expériences dans le maintien en conditions opérationnelles d'une plateforme en production
• Expérience dans les domaines du Big Data et des environnements Unix/Linux
• Compétences en communication et sens du service

Profils concernés par cette offre

Cette offre s'adresse aux candidats ayant une expérience significative dans le domaine de l'informatique, avec des compétences en Big Data et en environnements Unix/Linux. Une formation spécifique n'est pas exigée, mais un profil confirmé est souhaité.

Stack et compétences

Les compétences techniques requises pour ce poste incluent une expertise avancée en Spark et Kafka, ainsi qu'en Docker et Kubernetes. Les candidats doivent également avoir une solide expérience dans l'exploitation des environnements Unix/Linux.

En outre, ils devront être à l'aise avec les langages de programmation Scala et Python, et posséder une connaissance approfondie des outils d'automatisation CI/CD tels que Ansible, Jenkins et GitHub.

• Expertise en Spark et Kafka
• Expertise en Docker et Kubernetes
• Expérience dans l'exploitation des environnements Unix/Linux
• Langages de programmation : Scala, Python
• Outils d'automatisation CI/CD : Ansible, Jenkins, GitHub

Environnement technique

L'environnement technique de ce poste est composé d'une plateforme Datalake utilisant des technologies Big Data telles que Hadoop, Spark, Kafka et Hive. Les outils de conteneurisation Docker et Kubernetes sont également utilisés pour la gestion des environnements Unix/Linux.

Le candidat travaillera dans un contexte d'exploitation de systèmes Unix/Linux et sera amené à utiliser des langages de programmation comme Scala et Python, ainsi que des outils d'automatisation CI/CD tels qu'Ansible, Jenkins et GitHub.

• Technologies Big Data : Hadoop, Spark, Kafka, Hive, HBase
• Conteneurisation : Docker, Kubernetes
• Système Unix/Linux
• Langages de programmation : Scala, Python
• Automatisation et CI/CD : Ansible, Jenkins, GitHub

Techniques et pratiques du poste

Dans ce type de rôle, le Data Engineer participe activement au cycle de développement des solutions, en participant à la conception et au développement de nouvelles fonctionnalités. Il est également impliqué dans les revues techniques et les tests, tout en produisant de la documentation pour assurer une bonne compréhension par l'équipe.

Il joue un rôle clé dans la communication interne, en informant régulièrement ses pairs sur l'avancement des projets et en participant aux réunions d'exploitation.

• Participation au cycle de développement
• Conception et développement de nouvelles fonctionnalités
• Revues techniques et tests
• Documentation pour la compréhension interne

Informations pratiques

Informations vérifiées pour cette offre. Les éléments non communiqués à la source ne sont pas mentionnés.

• Lieu de travail : Marseille, France
• Temps de travail : Temps plein
• Expérience attendue : Solide expérience du maintien en conditions opérationnelles d'une plateforme en production
• Formation : Non spécifié

Se préparer pour postuler

Pour préparer votre candidature, vous pouvez mettre en avant vos expériences dans le maintien des systèmes en production et l'automatisation des processus. Vous devriez également avoir un portfolio ou des réalisations concrètes dans les domaines du Big Data et de la conteneurisation.

Il est recommandé de se tenir informé des dernières tendances techniques pour rester à jour avec les outils CI/CD tels que Jenkins et GitHub. Posez également des questions sur l'organisation interne et le fonctionnement de l'équipe lors d'une éventuelle entretien.

• Expériences en maintien des systèmes en production
• Automatisation des processus
• Portfolio ou réalisations dans les domaines du Big Data et de la conteneurisation
• Veille technique sur les outils CI/CD
• Questions sur l'organisation interne et le fonctionnement de l'équipe

Candidature