The Job
Contexte
Le Tribe « Customer Finance » est composé de plusieurs Squad, parmi elles la squad Finance Ingestion qui a pour mission de développer des outils et des applications pour la collecte de royalties auprès des plateformes de streaming de musique ainsi que préparer les données afin de faire la distribution des royalties auprès des producteurs de musiques.
En tant que Senior Data Engineer, tu intégras une équipe de Data Engineering travaillant avec les principes du framework agile Scrum. Cette équipe est composée essentiellement de 5 Data Engineer et 1 Software Engineer.
Nous avons un écosystème composé de :
Un socle de gestion des données (Delta Lake) plus d’1.5 milliard de lignes /mois
Data processing avec Scala et Spark utilisant le runtime de Databricks
Orchestration de nos data pipelines avec Airflow managé
Des APIs déployées avec AWS Lambda et API Gateway pour faire interagir les utilisateurs avec notre interface front (PHP)
AWS RDS pour hoster la base de données back-end sous PostgreSQL
Versionning du code sous GitLab avec un environnement de dev, staging et production
Infrastructure sous AWS
Les missions du Senior Data Engineer au sein de l’équipe :
– Accompagner les développeurs à écrire du code propre, qualitatif et conforme aux standards de l’équipe
- Interagir avec l’architecte, les équipes infrastructures Cloud pour concevoir les solutions de data engineering
– Proposer des améliorations continues et être garant de réduire les dettes techniques
- Développer des flux de données (data pipelines) avec de l’Apache Spark et du Scala
- Faire de l’orchestration via Airflow avec du Python
- Maintenir le workflow GitLab afin de garantir une bonne productivité de l’équipe de développement
- Effectuer des revues de codes des autres membres de l’équipe
- Collaborer les membres de l’équipe dev pour atteindre l’objectif du sprint
- Faire du support applicatif et fonctionnel de l’application auprès des opérationnel
Qualifications
Qualifications du Data Engineer
– 5-8 ans d’expérience en Scala
– Une maitrise horizontale de tous les composants d’une plateforme de data
– Expérience en programmation fonctionnel
– Connaissance d’un effect system en Scala (ZIO ou cats)
– Excellente maîtrise de l’API Spark en Scala avec pour but de guider l’équipe sur les bonnes pratiques
– Expérience en développement backend
– Une bonne maitrise des services AWS (API Gateway, Lambda, SNS, SQS, S3, Cloudwatch, VPC)
– Développer avec un état d’esprit Keep it Simple, Stupid (KISS)
– Excellente compétence dans la gestion de relation avec une équipe en remote
– Bonne communication pour gérer les différents points de vue et expliquer les contraintes aux utilisateurs
Optionnel
Expérience en PHP (framewok Symfony ou Laravel)
Additional Information
Set the tone with us
Chez Believe, nous avons deux cœurs : nos collaborateurs et nos artistes.
Nous croyons en la force de nos collaborateurs, qui s’épanouissent chaque jour en développant leur potentiel… Notre objectif est d’offrir à nos collaborateurs le meilleur environnement possible pour qu’ils puissent s’épanouir.
Rock the job
Programme de formation et de coaching sur mesure
Une politique de télétravail
Un programme de bien-être « Pauses » avec de nombreuses activités et animations en interne
Accès à Eutelmed, la plateforme numérique de santé mentale et de bien-être qui permet de parler à un psychologue expérimenté
Un restaurant d’entreprise sain et éco-responsable
Une assurance santé individuelle ou familiale
Avantages CE
Un rooftop
Une salle de sport avec des cours gratuits
Sing in harmony
Des groupes d’ambassadeurs pour s’engager sur la réduction de l’empreinte carbone et environnementale de Believe et l’équité professionnelle Femme/Homme.
Mise en place du Forfait mobilité durable: remboursement jusqu’à 600€ des frais de transport en commun/avec une faible empreinte carbone.
Congé 2nd parent de 5 jours calendaires rémunérés à 100% (en plus du congé légal paternité ou du congé d’adoption, nous ne l’attribuons pas au congé maternité)
Believe s’engage à garantir l’égalité des chances en matière d’emploi, sans tenir compte de l’origine, du sexe, des mœurs, de l’orientation sexuelle, du genre, de l’âge, de la situation de famille, de l’état de grossesse, d’une prétendue race, des opinions politiques, des activités syndicales, des convictions religieuses, de l’apparence physique, du nom de famille, du lieu de résidence, de l’état de santé, ou en situation de handicap.
Découvrez nos nouveaux locaux : bit.ly/believeoffice