Offre clôturée — candidatures fermées. Cette annonce n'est plus active ; la page est conservée à titre d'information. Explorez les offres encore ouvertes ci-dessous.
Data Engineer Databricks – Lyon
Aperçu de l'offre
- Expérience5 ans
- FormationBAC+5
- Salaire45 000 – 55 000 € / an
Description du poste
KOMEET TECHNOLOGIES recrute un(e) Data Engineer Databricks – Lyon à Paris.
Missions
- Concevoir et développer des pipelines de données robustes et évolutifs sur la plateforme Databricks.
- Optimiser les performances des pipelines existants tout en assurant leur maintenabilité et leur fiabilité.
- Gérer l’ingestion de données complexes à partir de multiples sources, y compris des systèmes traditionnels et des sources de données modernes.
- Utiliser Delta Lake pour gérer efficacement les ensembles de données, assurant la cohérence et l’intégrité des données.
- Concevoir et mettre en œuvre des pipelines déclaratifs avec Spark Declarative Pipelines pour une gestion simplifiée des flux de données.
Profil recherché
- Diplôme d’ingénieur ou équivalent dans un domaine informatique ou mathématiques.
- Deux à trois ans d’expérience en tant que Data Engineer, avec une spécialisation dans la plateforme Databricks.
- Bonne maîtrise de l’Apache Spark via PySpark et Spark SQL pour le développement de pipelines de données.
- Connaissance approfondie des mécanismes clés de Delta Lake, notamment le Delta log, ACID, schema evolution et time travel.
- Expérience dans la gestion de l’ingestion de données à grande échelle, y compris les méthodes d’ingestion de données de la plateforme Databricks.
Compétences
- Bonne maîtrise de la plateforme Databricks.
- Utilisation avancée d’Apache Spark via PySpark et Spark SQL pour le développement de pipelines Data.
- Connaissance des mécanismes clés de Delta Lake, notamment le Delta log, ACID, schema evolution et time travel.
À découvrir également : le poste de Data engineer.
Conditions et informations utiles
💰 45k-55k €/an
Entreprise
KOMEET TECHNOLOGIES
Informatique & Télécoms · Annonce publiée via Free-Work.com
KOMEET TECHNOLOGIES est une entreprise innovante spécialisée dans le développement et l’exploitation de solutions numériques pour les entreprises. Fondée en 2015 à Paris, elle compte aujourd’hui plus de 150 collaborateurs dédiés à la transformation digitale des organisations. La culture de l’entreprise se caractérise par une forte collaboration, un esprit d’équipe et une volonté constante d’amélioration continue.
Offre clôturée — candidatures fermées. Cette annonce n'est plus active ; elle est conservée à titre d'information.