Senior Data Engineer Databricks

Pulsover
  • Paris
  • Post Date: October 6, 2024
    • 17589
  • Applications 0
  • Views 8
Job Overview

logoÀ propos de Pulsover : Pulsover est un cabinet de conseil spécialisé dans la data, le cloud et le delivery, partenaire de Databricks et AWS.La mission de nos consultants Pulsover est d’accompagner des entreprises de toutes tailles dans leur transformation digitale grâce à la combinaison de leur expertise technique et de leur capacité à gérer des projets internationaux et à forts enjeux. Notre culture favorise l’innovation, la performance, et un environnement propice au développement professionnel.Nous développons notre pôle Data pour accompagner les besoins de projets data chez nos clients Grands Comptes.Si tu es passionné.e par la data, que tu possèdes une expertise approfondie sur Spark, Databricks et AWS, cette offre d’emploi est faite pour toi.En tant que Data Engineer Senior, tu joueras un rôle essentiel dans la création, la mise en œuvre et la gestion de nos pipelines de données. Tu seras responsable de concevoir des architectures de données robustes, de développer des solutions d’intégration de données efficaces et d’optimiser les performances de nos infrastructures de données.
Tes missions principales :Participer à des projets de data engineering basés sur un framework méthodologiqueDévelopper, industrialiser et maintenir des pipelines de données (principalement ETL et ML)Effectuer de l’exploration de données et du prototypage rapideMettre en application les meilleures pratiques : versioning, tests automatisés, CI/CDParticiper activement à l’automatisation des infrastructures basées sur des services de Cloud ComputingImplémenter des architectures de type Lakehouse pour casser les silosDéployer des algorithmes de machine learning at scale et sur des flux de streamingCollaborer avec l’ensemble des équipes depuis les spécifications fonctionnelles jusqu’aux validations métiers des solutions implémentéesContribuer à la mise en place de méthodologies Agile de type Scrum
Socle technologique et méthodologique :Stack technique du poste : Spark, Python, Scala, Scikit learn, MLFlow, Versionning (Git), CI/CD (GitHub Actions/ GitLab/ Jenkins)Job orchestration : Apache AirflowData platform: Databricks, SnowflakeCloud : AWS Méthodo : développement Agile/ travail en équipe collaborativeTests automatisés : Pytest, Scalatest, Cucumber
Profil recherché :De formation ingénieur ou équivalent avec une expérience de 5 ans minimum dans le data engineeringExpérience significative en tant que Data Engineer, avec une expertise approfondie sur Spark, Databricks, AWS et/ ou GCPSolide compréhension des principes de l’ingénierie des données, des architectures distribuées et des meilleures pratiques de gestion des donnéesExcellentes compétences en programmation, notamment dans les langages tels que Python ou ScalaConnaissance des technologies de bases de données, des outils ETL et de l’intégration de donnéesCapacité à travailler de manière autonome, à gérer plusieurs projets simultanément et à respecter les délaisBon niveau en anglais pour nos projets dans un contexte internationalEt surtout : bonne humeur et attitude positive sont essentielles 😉
Les avantages :Un environnement de travail collaboratif et stimulant, favorisant l’apprentissage continu et l’évolution professionnelleDes opportunités de formation et de développement professionnel pour rester à jour sur les dernières technologiesLa possibilité de travailler sur des projets de données complexes et stimulants, ayant un impact direct sur les décisions stratégiques de l’entrepriseUne rémunération compétitive et des avantages sociaux attractifs

Job Detail
Shortlist Never pay anyone for job application test or interview.

Related Jobs (4726)

Safety Information

  • Safety Tips For Candidate

    DYOR.

  • Safety Tips For Candidate

    Always check the employer\'s offer.