ORSYS formation
NOUS CONTACTER - +33 (0)1 49 07 73 73
NOUS CONTACTER - 📞 +33 (0)1 49 07 73 73    espace pro ESPACE PRO     inscription formation orsys S'INSCRIRE     drapeau francais   drapeau anglais
Nos domaines de formation :
Toutes nos formations Big Data, NoSQL

Formation Hadoop, développer des applications pour le Big Data

4,4 / 5
Stage pratique
Durée : 4 jours
Réf : APH
Prix  2019 : 2540 € H.T.
Pauses et déjeuners offerts
  • Programme
  • Participants / Prérequis
  • Intra / sur-mesure
  • avis vérifiés
Programme

Ce stage vous apprendra à développer des applications vous permettant de traiter des données distribuées en mode batch. Vous collecterez, stockerez et traiterez des données de formats hétérogènes avec Apache Hadoop afin de mettre en place des chaînes de traitement intégrées à votre Système d'Information.

Objectifs pédagogiques

  • Construire un programme à base de Map Reduce
  • Intégrer Hadoop HBase dans un workflow d'entreprise
  • Travailler avec Apache Hive et Pig depuis HDFS
  • Utiliser un graphe de tâches avec Hadoop

Travaux pratiques

Développement d'applications pour le Big Data.

Méthodes pédagogiques

Cours 30%, travaux pratiques 70%.
PROGRAMME DE FORMATION

Le Big Data

  • Définition du périmètre du Big Data.
  • Le rôle du projet Hadoop.
  • Les concepts de base des projets Big Data.
  • Présentation du Cloud Computing.
  • Différence entre Cloud Computing privé et public.
  • Les architectures Big Data à base du projet Hadoop.

Démonstration
Usage d'Hadoop et de GoogleApp.

Collecte de données et application de Map Reduce

  • Analyse des flux de données dans l'entreprise.
  • Données structurées et non-structurées.
  • Les principes de l'analyse sémantique des données d'entreprise.
  • Graphe des tâches à base de MapReduce.
  • La granularité de cohérence des données.
  • Transfert de données depuis un système de persistance dans Hadoop.
  • Transfert de données d'un Cloud dans Hadoop.

Travaux pratiques
Gérer la collecte d'informations clientèles par Map Reduce. Configuration de l'implémentation YARN. Développement d'une tâche basée sur Map Reduce.

Le stockage des données avec HBase

  • Plusieurs types de base de données XML.
  • Patterns d'usages et application au Cloud.
  • Application de Hadoop database au sein d'un workflow.
  • Utilisation des projets Hive/Pig.
  • Utilisation du projet HCatalog.
  • L'API Java HBase.

Travaux pratiques
Gérer les modifications d'un catalogue de données fournisseur.

Le stockage des données sur HDFS

  • Patterns d'usages et application au Cloud.
  • Architecture et installation d'un système HDFS, journal, NameNode, DataNode.
  • Opérations, commandes et gestion des commandes.
  • L'API HDFS Java.
  • Analyse de données avec Apache Pig.
  • Le langage Pig Latin. Utiliser Apache Pig avec Java.
  • Requêtage avec Apache Hive.
  • Réplication de données. Partage de données sur une architecture HDFS.

Travaux pratiques
Administrer un référentiel client partagé sur Hadoop. Utilisation de la console de visualisation.

Spring Data Hadoop

  • Introduction à Spring et Spring Data.
  • Le namespace Hadoop pour Spring.
  • Utiliser Spring pour simplifier la configuration Hadoop.
  • Configuration du cache distribué.
  • Définition des Jobs et dépendance entre Jobs.
  • Intégration des outils (Pig, Hive...).

Travaux pratiques
Refondre la gestion du catalogue de données fournisseur via Spring Data.

Participants / Prérequis

» Participants

Concepteurs, développeurs.

» Prérequis

Bonne expérience en développement Java. Des connaissances en architecture Web constituent un plus.
Intra / sur-mesure

Demande de devis intra-entreprise
(réponse sous 48h)

Vos coordonnées

En cochant cette case, j’atteste avoir lu et accepté les conditions liées à l’usage de mes données dans le cadre de la réglementation sur la protection des données à caractère personnel (RGPD).
Vous pouvez à tout moment modifier l’usage de vos données et exercer vos droits en envoyant un email à l’adresse rgpd@orsys.fr
En cochant cette case, j’accepte de recevoir les communications à vocation commerciale et promotionnelle de la part d’ORSYS Formation*
Vous pouvez à tout moment vous désinscrire en utilisant le lien de désabonnement inclus dans nos communications.
* Les participants inscrits à nos sessions de formation sont également susceptibles de recevoir nos communications avec la possibilité de se désabonner à tout moment.
Avis vérifiés
picto avis vérifiés
charly d. 25/06/2019
4 / 5
excellent dans l'ensemble s'arrete un peu trop sur les questions d'intervenants pour leur projet personnel faisant perdre un peu de temps et mettant à l'ecart le reste du groupe

Michel A. 25/06/2019
5 / 5
Le contenu correspond à ce que j'attendais. Manquait cependant dans le contenue de base, la description de certains outils complémentaires, mais cela a été compensé par le formateur.

Clément B. 25/06/2019
5 / 5
Formateur agréable et très impliqué

Noureldine b. 25/06/2019
5 / 5
support de cours était très complet,exercice bien préparé

Raphaëlle D. 21/05/2019
5 / 5
Formateur très sympathique, à l'écoute, bonne explication du cours et des exercices, s'est adapté au niveau du groupe

Murielle G. 21/05/2019
5 / 5
Le sujet est maintenant plus clair et concret. Le formateur a été très disponible et très pédagogue

gilles 27/11/2018
4 / 5
en tant qu' architecte, on aurait pu passer - de temps sur le code, nous le donner plutôt que le taper... Sachant que pour nous, l'objectif n'est pas d'être opérationnel mais de comprendre les principes

Benoit T. 27/11/2018
4 / 5
monde tres complexe

GORGEON 27/11/2018
4 / 5
Programme trop dense pour être vu en 4 jours

PELZER T. 20/11/2018
5 / 5
Le contenu est bien équilibré entre théorie et pratique

Tahar B. 22/10/2018
5 / 5
Le formateur est dynamique et à l'écoute.

Yidhir M. 22/10/2018
5 / 5
Sujet très intéressant et très vaste. Le formateur a su nous expliquer la partie théorique d'une manière très claire. Nous avons par la suite entamé la partie pratique où nous avons pu voir concrètement comment les notions théoriques s'appliquaient dans un contexte industriel. Excellent !

Hélèna O. 22/10/2018
5 / 5
Stéphane est un excellent formateur, il est très pédagogue, le support de cours (poly et les TP en machines virtuelles) est de très haute qualité, je peux repartir avec des machines virtuelles me permettant d'approfondir les différents sujets évoqués. Je repars demain au travail avec des connaissances solides et une compréhension technique du sujet, mais aussi métier car Stéphane nous a aussi ouvert aux diff[eacute

David M. 22/10/2018
5 / 5
Formation avec énormément de composant à présenter. Le formateur arrive parfaitement à nous faire comprendre l'interaction de tout cet écosystème sans nous perdre et le tout dans une superbe ambiance.

Thierry J. 01/10/2018
4 / 5
Contenu adapté à la formation désiré.

Audace A. 01/10/2018
4 / 5
Satisfait dans l'ensemble.

Solange d. 01/10/2018
4 / 5
contenu facile à suivre

Didier C. 01/10/2018
4 / 5
Beaucoup de chose voir et contenu adapté en fonction du besoin.

Raphael M. 01/10/2018
5 / 5
Clair, précis et construit. Formateur à l'écoute. Les supports sont très bien détaillés, les TPs sont très bien construits.

Mathieu C. 01/10/2018
5 / 5
Formation riche, et bien équilibrée entre interface utilisateur et shell. - Matériel pédagogique très fourni et polyvalent. - Formation bien préparée (VMs déjà prêtes en fonction des différents TPs) ce qui représente un gain de temps essentiel étant donnée la densité du programme.
Avis client 4,4 / 5

Les avis client sont issus des feuilles d’évaluation de fin de formation. La note est calculée à partir de l’ensemble des avis datant de moins de 12 mois.

Pour vous inscrire

Cliquez sur la ville, puis sur la date de votre choix.
[-]
PARIS
* Session garantie

Horaires

Les cours ont lieu de 9h à 12h30 et de 14h à 17h30.
Les participants sont accueillis à partir de 8h45.
Pour les stages pratiques de 4 ou 5 jours, les sessions se terminent à 15h30 le dernier jour.
En poursuivant votre navigation, vous acceptez l’utilisation de cookies nous permettant de vous proposer des offres correspondant à vos centres d’intérêt.
En savoir plus sur l’usage des cookies…   ✖ Fermer
linkedin orsys
twitter orsys
it! orsys
instagram orsys
pinterest orsys
facebook orsys
youtube orsys