Consulter sur Apec
Data Ingénieur – Expert Spark F/H
Côté build
Conception et préconisations d'architecture
- Réaliser l'analyse et l'état des lieux technique de la solution existante (Kafka Connect, Spark, Kubernetes, MongoDB sur OVH)
- Produire les préconisations d'amélioration du Spark streaming pour le traitement temps réel
- Définir le dimensionnement infrastructure adapté au streaming temps réel (350 bases, 5 000 req/s, 1 To/an)
- Proposer une stratégie de dimensionnement MongoDB et de structuration de la donnée (standardisation des patterns)
- Rédiger le document d'architecture cible et le dossier de préconisations
Côté run
Optimisation et maintien en condition opérationnelle
- Assurer la fiabilité et la performance du pipeline de données en production sur l'infrastructure OVH
- Superviser les flux Kafka Connect et garantir la continuité du traitement des données entrantes
- Monitorer les performances Spark et intervenir sur les axes d'optimisation identifiés
- Veiller à la cohérence et à la qualité de la donnée stockée dans MongoDB
- Participer aux revues techniques et accompagner les équipes internes ENOVACOM dans la montée en compétences
Vous êtes passionné·e par les architectures de données à grande échelle et le traitement temps réel ? Ce poste est fait pour vous.
En tant qu'Expert Spark Data Engineer, vous êtes responsable de l'analyse, de l'optimisation et de l'évolution de notre pipeline de données au cœur de notre écosystème BI et statistiques.
Chaque moment compte. Surtout ceux que vous vivez à fond. Bienvenue chez Consort Group.
Consort Group, accompagne depuis plus de 30 ans les entreprises dans la valorisation de leurs données et infrastructures. Elle s'appuie sur deux leaders, Consortis et Consortia, et place l’humain et la responsabilité sociétale au cœur de ses valeurs.
Formations liées à cette offre ( 34 )
Financé par OPCA
Manager en ingénierie informatique spécialisation cybersécurité (Apprentissage)
1806 heures au total
Chambre de commerce et d'industrie de vaucluse - cciv
Avignon
Financé par OPCA
Chargé de développement marketing et commercial (Apprentissage)
525 heures au total
Delta - groupe someform
Arles
Financement non renseigné
Chef de projet logiciel et réseau
600 heures au total
Institut formation conseil - ifc
Avignon
Financé par OPCA
Manager du marketing et de la performance commerciale (Apprentissage)
910 heures au total
Centre de formation professionnelle vincent de paul
Avignon
Financé par OPCA
Manager en ingénierie informatique spécialisation développement sécurisé par applications (Apprentissage)
1650 heures au total
Chambre de commerce et d'industrie de vaucluse - cciv
Avignon
Financement non renseigné
Marketing digital – Référencement internet SEO
7 heures au total
Ace service gagnant - ace concept
Noves
Financé par OPCA
BTS conception et réalisation de systèmes automatiques (Apprentissage)
1385 heures en centre
1680 heures en entreprise
1680 heures en entreprise
Api 84 - cfai 84
Avignon
Financé par OPCA
Manager en ingénierie informatique spécialité cybersécurité (Apprentissage)
1350 heures en centre
3780 heures en entreprise
3780 heures en entreprise
Api 84 - cfai 84
Pertuis
Financé par OPCA
Titre professionnel administrateur d’infrastructures sécurisées option cybersécurité (Apprentissage)
630 heures en centre
1200 heures en entreprise
1200 heures en entreprise
Api 84 - cfai 84
Pertuis
Financement non renseigné
Communication visuelle et numérique
420 heures au total
Capcom'art
Avignon
Financement non renseigné
Développer et valoriser sa marque – Boutique en ligne
105 heures au total
Capcom'art
Avignon
Financement non renseigné
Tosa WordPress – Concevoir votre site web e-commerce
28 heures au total
Ng formations - ngnear
Orange
Financement non renseigné
Manager de la communication et stratégie digitale
1200 heures au total
Institut formation conseil - ifc
Avignon
Financé par OPCA
Chef de projet logiciel et réseau (Apprentissage)
540 heures au total
Institut formation conseil - ifc
Avignon
Financé par OPCA
Manager de projets informatiques spécialité cyber et haute disponibilité (Apprentissage)
455 heures en centre
1395 heures en entreprise
1395 heures en entreprise
Api 84 - cfai 84
Pertuis
Financé par Collectivité territoriale - Conseil régional
Responsable marketing opérationnel
560 heures en centre
560 heures en entreprise
560 heures en entreprise
Institut national de formation et de recherche sur l'education permanente - infrep
Avignon
Financement non renseigné
BTS services informatiques aux organisations option A : solutions d’infrastructure, systèmes et réseaux
1200 heures au total
Institut formation conseil - ifc
Avignon
Financé par OPCA
Manager en stratégies des communications (Apprentissage)
1110 heures au total
Institut formation conseil - ifc
Avignon
Financement non renseigné
Titre professionnel concepteur développeur d’applications
238 heures au total
Yamina yamina djidel - dl industry
Entraigues-sur-sorgues
Financement non renseigné
Titre professionnel concepteur développeur d’applications
427 heures au total
Matrice l'école
Avignon
Financement non renseigné
Titre professionnel concepteur développeur d’applications
238 heures au total
Yamina yamina djidel - dl industry
Entraigues-sur-sorgues
Financement non renseigné
Titre professionnel concepteur développeur d’applications
840 heures en centre
210 heures en entreprise
210 heures en entreprise
Optim'hum
Avignon
Financement non renseigné
BUT spécialité informatique parcours réalisation d’applications : conception, développement, validation
800 heures en centre
600 heures en entreprise
600 heures en entreprise
Aix marseille université - amu
Arles
Financé par Pôle emploi
NUM : Titre professionnel technicien d’assistance en informatique
799 heures en centre
140 heures en entreprise
140 heures en entreprise
Innovation développement formation - id formation
Avignon
Financé par OPCA
Titre professionnel concepteur développeur d’applications (Apprentissage)
450 heures en centre
1260 heures en entreprise
1260 heures en entreprise
Api 84 - cfai 84
Pertuis
Financé par OPCA
Master mention informatique parcours ingénierie des réseaux et des systèmes (Apprentissage)
420 heures en centre
1260 heures en entreprise
1260 heures en entreprise
Api 84 - cfai 84
Pertuis
Financé par OPCA
Titre professionnel technicien d’assistance en informatique (Apprentissage)
450 heures en centre
1260 heures en entreprise
1260 heures en entreprise
Api 84 - cfai 84
Pertuis
Financé par Pôle emploi
NUM : Titre professionnel concepteur développeur d’applications
881 heures en centre
175 heures en entreprise
175 heures en entreprise
Simplon.co
Avignon
Financé par OPCA
Manager de projets informatiques spécialité expert IT application intelligente et big data (Apprentissage)
455 heures en centre
1395 heures en entreprise
1395 heures en entreprise
Api 84 - cfai 84
Pertuis
Financé par Collectivité territoriale - Conseil régional
Titre professionnel développeur web et web mobile
908 heures en centre
350 heures en entreprise
350 heures en entreprise
Agence nationale pour la formation professionnelle des adultes - accès à l'emploi - afpa - acces a l'emploi
Arles
Financement non renseigné
Titre professionnel développeur web et web mobile
200 heures au total
Yamina yamina djidel - dl industry
Entraigues-sur-sorgues
Financé par Pôle emploi
NUM : Titre professionnel développeur web et web mobile
881 heures en centre
189 heures en entreprise
189 heures en entreprise
Simplon.co
Avignon
Financé par Collectivité territoriale - Conseil régional
Titre professionnel développeur web et web mobile module codage
854 heures en centre
280 heures en entreprise
280 heures en entreprise
M2i scribtel - scribtel formation
Avignon
Vous aimeriez voir votre entreprise ici ?
Rapprochez vous de votre agence Pôle Emploi et adhérez à la French Tech Grande Provence
