The Job
Contexte
Le Tribe « Customer Finance » est composé de plusieurs Squad, parmi elles la squad Finance Ingestion qui a pour mission de développer des outils et des applications pour la collecte de royalties auprès des plateformes de streaming de musique ainsi que préparer les données afin de faire la distribution des royalties auprès des producteurs de musiques.
En tant que Data Engineer, tu intégras une équipe de Data Engineering travaillant avec les principes du framework agile Scrum. Cette équipe est composée essentiellement de 5 Data Engineer et 1 Software Engineer. Nous avons un écosystème qui se compose
une socle de gestion des données (Delta Lake) plus d’1.5 milliard de lignes /mois
data engineering avec du Scala Spark utilisant le runtime de Databricks
orchestration de nos data pipelines avec Airflow managé
des APIs avec les Lambda AWS pour faire interagir les utilisateurs avec notre interface front (PHP)
RDS pour hoster la base de données back-end sous PostgreSQL
versionning du code sous GitLab avec un environnement de dev, staging et production
infrastructures sous AWS
Les missions du Data Engineer au sein de l’équipe :
- Interagir avec le Product Owner, le métier pour comprendre les besoins
- Interagir avec l’architecte, les équipes infrastructures et Cloud pour concevoir les solutions de data engineering
- Développer des flux de données (data pipelines) avec du Apache Spark et du Scala
- Faire de l’orchestration via Airflow avec du Python
- Maintenir et améliorer les modules existants de l’application
- Utiliser GitLab pour tester, builder et déployer son code sur les différents environnements
- Effectuer des revues de codes des autres membres de l’équipe
- Interagir avec les membres de l’équipe pour atteindre l’objectif du sprint
- Faire du support applicatif et fonctionnel de l’application auprès des opérationnel
Qualifications
Qualifications du Data Engineer
– 3-5 ans d’expérience dans la pratique de développement sous Scala
– une très bonne maitrise du framework Spark avec du Scala, nous ne faisons pas de PySpark
– une bonne maitrise de conception et développement des data pipelines
– Développer avec un état d’esprit Keep it Simple, Stupid (KISS)
– une bonne maitrise d’un outil de versionning de code tel que Gitlab
– une bonne maitrise des APIs avec du Lambda
– une expérience dans l’écosystème AWS
Additional Information
Set the tone with us
Chez Believe, nous avons deux cœurs : nos collaborateurs et nos artistes.
Nous croyons en la force de nos collaborateurs, qui s’épanouissent chaque jour en développant leur potentiel… Notre objectif est d’offrir à nos collaborateurs le meilleur environnement possible pour qu’ils puissent s’épanouir.
Rock the job
Programme de formation et de coaching sur mesure
Une politique de télétravail
Un programme de bien-être “Pauses” avec de nombreuses activités et animations en interne
Accès à Eutelmed, la plateforme numérique de santé mentale et de bien-être qui permet de parler à un psychologue expérimenté
Un restaurant d’entreprise sain et éco-responsable
Une assurance santé individuelle ou familiale
Avantages CE
Un rooftop
Une salle de sport avec des cours gratuits
Sing in harmony
Des groupes d’ambassadeurs pour s’engager sur la réduction de l’empreinte carbone et environnementale de Believe et l’équité professionnelle Femme/Homme.
Mise en place du Forfait mobilité durable: remboursement jusqu’à 600€ des frais de transport en commun/avec une faible empreinte carbone.
Congé 2nd parent de 5 jours calendaires rémunérés à 100% (en plus du congé légal paternité ou du congé d’adoption, nous ne l’attribuons pas au congé maternité)
Believe s’engage à garantir l’égalité des chances en matière d’emploi, sans tenir compte de l’origine, du sexe, des mœurs, de l’orientation sexuelle, du genre, de l’âge, de la situation de famille, de l’état de grossesse, d’une prétendue race, des opinions politiques, des activités syndicales, des convictions religieuses, de l’apparence physique, du nom de famille, du lieu de résidence, de l’état de santé, ou en situation de handicap.
Découvrez nos nouveaux locaux : bit.ly/believeoffice