Dernière mise à jour le 11/06/2025

AWS : BigData avec Hadoop EMR

Informations générales

Type de formation : Formation continue
Domaine : Systèmes et Réseaux
Filière : Cloud computing
Rubrique : AWS
Formation éligible au CPF : Non
Formation Action collective : Non

Objectifs & compétences

Savoir mettre en oeuvre les techniques de calcul distribué avec Hadoop EMR

Public visé

Architectes, chefs de projets souhaitant bénéficier des services offerts par la distribution Hadoop fournie par AWS

Pré-requis

Connaissance des fondamentaux du cloud

Programme

Présentation AWS Hadoop EMR  
Rappels des services de base : EC2 (Elastic Compute Cloud), VPC (Virtual Private Cloud), S3 (Simple Storage Service), EBS (Elastic Block Storage), RDS (Relational Database Service)
Caractéristiques du calcul distribué et du service EMR (Amazon Elactis MapReduce)  
La distribution Hadoop EMR  
Historique du projet hadoop
Les fonctionnalités : stockage, outils d'extraction, de conversion, ETL, analyse, ...  
Exemples de cas d'utilisation sur des grands projets.
Les principaux composants :HDFS pour le stockage et YARN pour les calculs.
Les distributions et leurs caractéristiques.
Composants de la distribution Hadoop EMR  
Mise en œuvre  
Démonstrations sur une architecture Hadoop multi-noeuds.
TP : mise en place d'une configuration de base avec HBase.
Cycle de fonctionnement.
Transferts par s3.
Envoi des travaux.
Visualisation des résultats.
Suivi des travaux avec Hue.
Interactivité avec les Notebooks : jupyter.
Configuration des composants de la distribution.  
Exploitation  
Gestion des évènements avec Events.
Contrôle du réseau et des VPC.
Automatisation de l'exécution sur AWS depuis un poste local.
Suivi distant des travaux.
Journalisation, visualisation des logs.Utilisation de la ferme aws en débordement d'une ferme locale.  
Sécurité : mise en place d'une configuration de sécurité.
Liens avec IAM.  
Optimisation  
Analyse des performances.
Déploiement d'une configuration avec Spark.
Evaluation des performances par rapport à une ferme locale.
Comparaison des coûts.
Mise en place d'automates d'optimisation.
 

Modalités

Modalités : en présentiel, distanciel ou mixte . Toutes les formations sont en présentiel par défaut mais les salles sont équipées pour faire de l'hybride. – Horaires de 9H à 12H30 et de 14H à 17H30 soit 7H – Intra et Inter entreprise.
Pédagogie : essentiellement participative et ludique, centrée sur l’expérience, l’immersion et la mise en pratique. Alternance d’apports théoriques et d’outils pratiques.
Ressources techniques et pédagogiques : Support de formation au format PDF ou PPT Ordinateur, vidéoprojecteur, Tableau blanc, Visioconférence : Cisco Webex / Teams / Zoom.
Pendant la formation : mises en situation, autodiagnostics, travail individuel ou en sous-groupe sur des cas réels.

Méthodes

Fin de formation : entretien individuel.
Satisfaction des participants : questionnaire de satisfaction réalisé en fin de formation.
Assiduité : certificat de réalisation.
Validations des acquis : grille d'evalution  des acquis établie par le formateur en fin de formation.
Code de formation : VC203

Tarifs

Prix public : 1900
Tarif & financement :
Nous vous accompagnons pour trouver la meilleure solution de financement parmi les suivantes :
Le plan de développement des compétences de votre entreprise : rapprochez-vous de votre service RH.
Le dispositif FNE-Formation.
L’OPCO (opérateurs de compétences) de votre entreprise.
France Travail: sous réserve de l’acceptation de votre dossier par votre conseiller Pôle Emploi.
CPF -MonCompteFormation
Contactez nous pour plus d’information : contact@aston-institut.com

Lieux & Horaires

Durée : 21 heures
Délai d'accès : Jusqu'a 8 jours avant le début de la formation, sous condition d'un dossier d'insciption complet

Prochaines sessions

Handi-accueillante Accessible aux personnes en situations de handicap. Pour toutes demandes, contactez notre référente, Mme Rizlene Zumaglini Mail : rzumaglini@aston-ecole.com

à voir aussi dans le même domaine...

Formation continue

Cloud computing

AZ204

Microsoft Azure : Développement de solutions

#Cloud #actioncollective #computing 

A l’issue de la formation, le stagiaire sera capable de concevoir et de créer des applications et des services Cloud sous Microsoft Azure. --> La formation vise l’acquisition des connaissances et compétences rattachées au cours officiel sur le développement de solutions pour Microsoft Azure (AZ 204 ou équivalent en cas d’évolution décidée par l’éditeur).   --> Ce cours s’inscrit dans le cursus de certification proposé par l’éditeur mais le passage de l’examen n’est pas compris dans la présente consultation. Comprendre comment créer et déployer des solutions dans Microsoft Azure Sélectionner une solution de technologie cloud appropriée à un besoin Savoir mettre en œuvre des solutions de calcul Azure Développer pour le stockage du cloud Créer les solutions Platform as a Service (PaaS) Sécuriser les solutions Cloud ? Mettre à l’échelle une solution Azure   Réagir aux évènements, échanger des messages applicatifs   Gérer les APIs via APIM     

35 heures de formations sur 5 Jours
En savoir plus

Formation continue

Cloud computing

SYR633

VMware vsphere 8 : Troubleshooting

    • Être capable de présenter les principes et procédures de dépannage
    • Comprendre comment utiliser les interfaces de ligne de commande, les fichiers journaux et vSphere Client pour diagnostiquer et résoudre les problèmes dans l'environnement vSphere
    • Savoir identifier les problèmes de réseau en fonction des symptômes signalés, valider et dépanner le problème signalé, identifier la cause première et implémenter la résolution appropriée
    • Pouvoir analyser les scénarios de défaillance du stockage à l'aide d'une méthodologie de dépannage logique, identifier la cause première et appliquer la résolution appropriée pour résoudre le problème
    • Comprendre comment dépanner les scénarios de défaillance de cluster vSphere et analyser les causes possibles
    • Diagnostiquer les problèmes courants de haute disponibilité de VMware vSphere et fournir des solutions
    • Être capable d'identifier et valider les problèmes d'hôte VMware ESXi et de VMware vCenter Server, d'analyser les scénarios de défaillance et de sélectionner la bonne résolution
    • Pouvoir résoudre les problèmes de machine virtuelle, y compris les problèmes de migration, les problèmes d'instantané, les problèmes de connexion et les problèmes de performances avec les composants vSphere
 

35 heures de formations sur 5 Jours
En savoir plus

Formation continue

Cloud computing

MSAI102

Microsoft Azure – Conception et implémentation de solutions d’IA

Décrire les considérations pour le développement d'applications compatibles avec l'IA Comprendre comment créer, configurer, déployer et sécuriser les services cognitifs Azure Pouvoir créer des applications avec des capacités de compréhension du langage naturel Savoir créer des applications QnA Comprendre comment créer des solutions conversationnelles avec des bots Apprendre à créer des solutions de recherche intelligentes pour l'exploration des connaissances  

28 heures de formations sur 4 Jours
En savoir plus

Formation continue

Cloud computing

AS743D

VMware vSphere: Install, Configure, Manage [V6.7]

By the end of the course, you should be able to meet the following objectives: Describe the software-defined data center Explain the vSphere components and their function in the infrastructure Add ESXi hosts to a VMware vCenter® Server Appliance™ instance Manage vCenter Server Appliance Use a local content library as an ISO store, and deploy a virtual machine Describe vCenter Server architecture Use vCenter Server to manage an ESXi host

35 heures de formations sur 5 Jours
En savoir plus

Formation continue

Cloud computing

VC200

AWS : les fondamentaux

Concevoir une architecture applicative avec AWS.

7 heures de formations sur 1 Jours
En savoir plus

Formation continue

Cloud computing

AZ220

Formation Microsoft Azure – Développeur IoT

Cette formation pratique permet aux participants d'acquérir les connaissances nécessaires pour réussir à créer et à maintenir les parties cloud et edge d’une solution IoT Azure.

28 heures de formations sur 4 Jours
En savoir plus