Formation Administrer la plateforme Hadoop Hortonworks

En suivant la formation Administrer la plateforme Hadoop Hortonworks, dispensée par notre cabinet de formation, vous découvrirez tous les détails qui vous seront utiles pour améliorer vos compétences pour Administrer la plateforme Hadoop Hortonworks.

Objectifs de la formation Administrer la plateforme Hadoop Hortonworks :

Les objectifs de la formation sont  :

• Apporter les compétences et connaissances pour maitriser l’administration d’Hadoop sur une distribution Hortonworks .
• Savoir les différents modes d’installation , la configuration ,les différents outils , l’administration en détail, la sécurité et enfin l’exploitation au quotidien.

Programme de la formation Administrer la plateforme Hadoop Hortonworks :

Le Programme de la formation est détaillé ci-dessous :

Introduction

• Les fonctionnalités du framework Hadoop.
• Les différentes versions.
• Distributions : Apache, Cloudera, Hortonworks, EMR, MapR, DSE.
• Spécificités de chaque distribution.
• Architecture et principe de fonctionnement.
• Terminologie : NameNode, DataNode,
• Resource Manager, NodeManager.
• Rôle des différents composants.
• Le projet et les modules : Hadoop Common, HDFS, YARN, Spark, MapReduce
• Oozie, Pig, Hive, HBase, …

Les outils Hadoop

• Infrastructure/Mise en oeuvre :
• Avro, Ambari, Zookeeper, Pig, Tez, Oozie, Falcon, Pentaho
• Vue d’ensemble
• Gestion des données.
• Exemple de sqoop.
• Restitution : webhdfs, hive, Hawq,
• Mahout,ElasticSearch ..

Installation et configuration

• Trois modes d’installation : local, pseudo-distribué, distribué
• Première installation.
• Mise en œuvre avec un seul nœud Hadoop.
• Configuration de l’environnement, étude des fichiers de configuration
• Gestion de la grappe, différentes méthodes :
• Ligne de commandes, API Rest, serveur http intégré, APIS natives

Administration Hadoop

• Outils complémentaires à yarn et hdfs : jConsole, jconsole yarn
• Exemples sur le suivi de charges, l’analyse des journaux.
• Principe de gestion des noeuds, accès JMX.

Administration HDFS :

• Présentation des outils de stockage des fichiers, fsck, dfsadmin
• Mise en œuvre sur des exemples simples de récupération de fichiers
• Gestion centralisée de caches avec Cacheadmin
• Déplacement d’un NameNode. Mise en mode maintenance.

Haute disponibilité

• Mise en place de la haute disponibilité sur une distribution Ambari.

Sécurité

• Mécanismes de sécurité et mise en oeuvre pratique :
• Activation de la sécurité avec Kerberos dans core-site.xml, et dans hdfs-site.xml pour les NameNode et
• DataNode. Sécurisation de yarn avec la mise en oeuvre d’un proxy et d’un Linux Container Executor.

Exploitation

• Installation d’une grappe Hadoop avec Ambari. Tableau de bord. Lancement des services.
• Principe de la supervision des éléments par le NodeManager.
• Monitoring graphique avec Ambari.
• Présentation de Ganglia,Kibana

Approche pédagogique :

Notre approche pédagogique pour cette Formation consiste en :

• Cas pratiques

• Remise d’outils

• Echanges d’expériences

Participants de la Formation :

Les personnes qui peuvent participer à cette formation sont les :

• Chefs de projet
• Administrateurs ainsi qu’à toute personne souhaitant mettre en œuvre un système distribué avec Hadoop

N’hésitez pas à contacter le cabinet New Performance Management

pour lui confier votre

ingénierie de formation ou pour vos besoins en formation :

En présentiel- A distance- En Elearning

Merci.

New Performance Management est un cabinet de formation au Maroc avec un ADN Africain à travers plusieurs partenariats stratégiques avec d’Autres Cabinets de Formation en Afrique.

Présent sur le marché depuis 2011, notre équipe dynamique ne cesse de développer ses Process afin de répondre aux besoins évolutifs de sa clientèle en matière de formation Professionnelle.