Véritable référence dans le monde informatique
Espace collaborateur
Accueil
Société
Qui sommes-nous ?
Valeurs / Atouts
Chiffres clés
Partenaires
Plan d'accès
Prestation
Pôles d'expertise
Secteurs d'activité
Domaines d'intervention
Métiers
Emploi
Offres d'emploi
Politique RH
Formation
Liste de diffusion
X
Accueil
Société
Qui sommes-nous ?
Valeurs / Atouts
Chiffres clés
Mécénat
Partenaires
Plan d'accès
Prestation
Pôles d'expertise
Secteurs d'activité
Domaines d'intervention
Métiers
Emploi
Offres d'emploi
Politique RH
Formation
Liste de diffusion
>
Emploi
>
Détail d'une offre
DÉTAIL DE L'OFFRE
OFFRE D'EMPLOI NUMÉRO 15286
Intitulé du poste
Description du poste
INGENIEUR INFORMATIQUE CONNAISSANT HADOOP Architecture Mise en place des principes directeurs sur l'utilisation du cluster Vérification de la bonne application des normes et des standards Proposition d'évolutions et de solutions pour améliorer l'industrialisation, l'exploitation, la supervision, les performances et la résilience du cluster Etude et analyse détaillée des propositions à évaluer Administration Configuration du cluster en fonction des besoins identifiés Suivi des espaces de stockage Optimisation des chargements de données Maintien de la sécurité Intégration Mise en oeuvre des solutions validées Support Maintien en condition opérationnelle des infrastructures et des composants logiciels du cluster Assistance auprès des équipes : Optimisation des traitements Prise en main de l'outillage mis à disposition Chargement des données Transmission du savoir-faire Rédaction des livrables suivants : Dossier d'architecture Dossier d'installation Dossier d'administration Dossier d'exploitation Modes opératoires Réalisation de transferts de connaissances Compétences attendues : Cluster Hadoop HDP 3.1 : HDFS, YARN, Ambari 2.7.3, Hive et Hive LLAP 3.1, Spark 2.3.2, BigSQL 6.0.0, Zeppelin, Ranger, Knox, SQL, Zookeeper Description des missions réalisées : nalyse et optimisation Architecture Analyse et évolution des performances du cluster Hadoop Analyse de performances des moteurs de traitements du cluster (Hive, Spark, Hive LLAP, BigSQL) Etude et analyse des files de traitements YARN en fonction des besoins de ressources des équipes. Etude et analyse d'un système de contrôle centralisé des logs Hadoop Administration Configuration des moteurs de traitements du cluster (Hive, Spark, Hive LLAP, BigSQL) Configuration des files de traitements YARN Intégration Industrialisation des traitements de chargement des données (scripting) Configuration de la sécurité AD pour le composant Zeppelin Intégration des métriques du cluster Hadoop dans le système de supervision Réalisation d'un système de contrôle centralisé des logs Hadoop (scripting) Support Suivi des incidents auprès du support Cloudera/IBM Transmission du savoir-faire Rédaction et complétude des documents d'architecture, d'exploitation et d'installation Transfert de connaissance sur le fonctionnement des moteurs de traitements Spark et Hive et du partage des ressources du cluster Phase 2 : POC Décisionnel Architecture Etude de la faisabilité de bascule du SID sur le cluster Hadoop Définition de l?architecture de chargement en mode continu Etude des changements sur les flux de traitements existants Définition et validation des formats des tables de données dans le socle Validation des moteurs de traitements utilisés Analyse comparative des performances du socle par rapport au socle du SID actuel Définition d?un rapport pilote pour réaliser un traitement de bout en bout Intégration Accostage de l?outillage client (Cognos, SAS, Datastage) sur le socle Hadoop Configuration des composants Chargement des données Support Accompagnement du pilotage projet pour la définition des plans d?action Transmission du savoir-faire Rédaction du bilan technologique Méthodologie projet adoptée : Cycle en V, Démarche d?audit de besoin (existant-cible), Méthodologie adaptative de projet Description succincte de la valeur ajoutée du prestataire : Définition de solutions technologiques pérennes adaptées aux besoins. Argumentation sur la définition proposée au regard des autres possibilités. Amélioration des temps de traitement des opérations. Réduction importante du temps d?indisponibilité du cluster. Réactivité de support auprès des Data Analystes. Capacité à accompagner les équipes dans le pilotage de leurs projets et l?atteinte de leurs objectifs. Partage une vision optimiste sur les objectifs des projets confiés.
Type de poste
Date de début
Lieu de mission
Département
Date de dépôt
Niveau de priorité
Postuler à cette offre
<< Retour à la liste des offres