Data Engineer PySpark (H/F)

Le rôle et son périmètre

Ce poste de Data Engineer PySpark (H/F) à Toulouse concerne la conception, le développement et la maintenance du datalake stratégique de l'entreprise. Vous serez également chargé(e) de collaborer étroitement avec les équipes de production applicative et DevOps pour garantir des solutions performantes et robustes.

Dans ce type de poste, vous participerez à la définition des architectures ETL (Extract, Transform, Load) à grande échelle. Vous serez responsable du maintien et de l'optimisation du datalake existant, tout en contribuant activement au développement de nouvelles solutions.

• Concevoir et développer le datalake stratégique
• Collaborer avec les équipes de production applicative et DevOps
• Maintenir et optimiser le datalake existant
• Participer à la définition des architectures ETL

Responsabilités de développement

Au quotidien, vous serez en charge du développement et de la maintenance des solutions liées au datalake. Vous devrez concevoir des architectures robustes pour traiter les données massives et garantir leur intégrité.

Vous travaillerez en étroite collaboration avec les équipes de production applicative et DevOps, assurant ainsi une intégration fluide et efficace des nouvelles solutions dans l'infrastructure existante.

• Développement et maintenance du datalake
• Conception d'architectures robustes
• Collaboration avec les équipes de production applicative et DevOps

Profil recherché

Nous recherchons un(e) Data Engineer avec une expérience professionnelle comprise entre 5 et 10 ans. Une formation en informatique ou en mathématiques est requise, ainsi qu'une maîtrise du français.

Profils concernés par cette offre

Cette offre s'adresse aux candidats ayant une expérience significative en tant que Data Engineer, avec une spécialisation dans Python et PySpark. Des profils confirmés du métier sont donc particulièrement encouragés.

Stack et compétences

Pour réussir dans ce rôle, vous devrez posséder une solide maîtrise de Python et PySpark. Vous devrez également être à l'aise avec les bibliothèques avancées pour l'intégration de systèmes (requests, pandas) ainsi que les architectures ETL à grande échelle.

En plus des compétences techniques, vous devrez démontrer une capacité à travailler en équipe et à résoudre des problèmes complexes.

• Python et PySpark
• Bibliothèques Python avancées (requests, pandas)
• Architectures ETL à grande échelle
• Travail d'équipe
• Résolution de problèmes

Ce que couvre généralement ce type de fonction

Dans ce genre de poste, vous serez amené(e) à travailler avec des technologies comme Python et PySpark. Vous devrez maîtriser les bibliothèques Python avancées pour l'intégration de systèmes (requests, pandas), ainsi que les architectures ETL à grande échelle.

Les missions peuvent varier selon les employeurs, mais elles se concentrent généralement sur la gestion des données massives et le développement de solutions robustes pour garantir leur intégrité et leur disponibilité.

• Utilisation de Python et PySpark
• Maîtrise des bibliothèques Python avancées
• Connaissance des architectures ETL à grande échelle

Informations pratiques

Informations vérifiées pour cette offre. Les éléments non communiqués à la source ne sont pas mentionnés.

• Type de contrat : CDI
• Lieu de travail : Toulouse, France
• Expérience attendue : 5 à 10 ans

Se préparer pour postuler

Pour préparer votre candidature, vous pouvez mettre en avant vos projets passés impliquant le développement de solutions ETL avec Python et PySpark. Il est également recommandé de rester à jour sur les dernières tendances techniques dans ce domaine.

N'hésitez pas à poser des questions sur la stack technique utilisée par l'entreprise lors de votre entretien, ainsi que sur l'équipe qui vous accompagnera.

• Mettez en avant vos projets passés
• Restez informé(e) des dernières tendances techniques
• Poser des questions sur la stack technique et l'équipe

Candidature