Lead software engineer - Systèmes distribués – Plateforme de données (H/F)

La Direction Générale de la Sécurité Extérieure, DGSE, recrute un lead software engineer - Systèmes distribués – Plateforme de données (H/F).

Le poste est situé à Paris. La nationalité française est obligatoire.

Domaine métier

Sciences et Technologies

Votre environnement de travail

Les flux de données traités par la DGSE sont massifs et hétérogènes, et sont essentiels à la production du renseignement et au soutien aux opérations. Nous recherchons un lead software engineer ou un software engineer confirmé souhaitant évoluer vers un poste de lead. Vous rejoindrez la Direction Technique et de l’Innovation et piloterez l’équipe chargée de construire et opérer la nouvelle plateforme de données de la DGSE.

L’équipe a la responsabilité de fournir une infrastructure Data Lakehouse fiable, évolutive et hautement disponible, permettant l’ingestion, le stockage et le traitement des données. Elle développe également les services fondamentaux permettant aux moteurs de requêtes de découvrir les tables et données, de stocker les données en utilisant le format de table Apache Iceberg, d’authentifier les utilisateurs et de s’assurer qu’ils disposent des droits sur la donnée conformément au cadre légal.

Rejoignez-nous et contribuez à transformer un flux de données massif en renseignements précieux.

Vos missions

Vous serez en charge des activités suivantes :

• Encadrer et coordonner les efforts de l’équipe pour atteindre les objectifs fixés (animation et pilotage, planification, identification des blocages, prise de décisions techniques),

• comprendre les enjeux métiers, définir et mettre en œuvre une vision puis traduire techniquement les besoins,

• établir des liens forts et collaborer avec les parties prenantes (Data Engineers, Data Analysts, Data Scientists et Data Architects),

• participer aux discussions techniques et être moteur aux interfaces avec les équipes techniques opérant les produits et systèmes de l’écosystème,

• construire et opérer le cluster de stockage Apache Ozone,

• gérer l’architecture d’exécution des traitements (Yarn, Kubernetes),

• construire et opérer le Data Lakehouse au format de table Apache Iceberg et le REST catalog associé,

• optimiser le stockage et le traitement des données (partitionnement, tri, compactage),

• fournir des connecteurs Spark / Flink / Trino pour les traitements en batch et streaming,

• mettre en œuvre une stack d’observabilité, de monitoring et d’alerting facilitant la détection proactive de problèmes,

• assurer une veille constante et suivre les évolutions régulières des technologies open source utilisées.

En nous rejoignant, vous découvrirez :

• Un environnement unique, qu’aucune autre structure ne peut vous proposer,

• Un métier proche du renseignement et de l’opérationnel.

 Les plus de l’offre

• Au coeur du secret   

• Technologies à la pointe

• Missions uniques

Vos avantages à rejoindre la DGSE

• La satisfaction de travailler pour votre pays et la défense de ses valeurs  

• Plus de 1000 formations linguistiques et thématiques

• Nombreuses activités culturelles et sportives

• Restaurants et points de vente à emporter fait maison

• 48 à 50 jours de congés annuels

Pour connaître les autres avantages, consultez notre site sur https://www.dgse.gouv.fr/fr/la-dgse/nos-actualites/rejoindre-la-dgse-de-nombreux-atouts-au-quotidien