Certification Microsoft - Perform Data Engineering on Microsoft Azure HDInsight (70-775) par Evolution Multimédia

Introduction à HDInsight
Qu'est
- ce que le Big Data ?
Introduction à Hadoop
Travailler avec la fonction MapReduce
Introduction à HDInsight
Déploiement des clusters HDInsight
Identifier les types de clusters HDInsight
Gérer les clusters HDInsight via le portail Azure
Gérer les clusters HDINsight via Azure PowerShell
Autorisation des utilisateurs pour l'accès aux ressources
Clusters non joints au domaine
Configurer les clusters HDInsight joints au domaine
Gérer les clusters HDInsight joints au domaine
Chargement des données dans HDInsight
Stockage des données pour le traitement HDInsight
Utiliser les outils de chargement des données
Valoriser les données stockées
Dépannage de HDInsight
Analyser les journaux HDInsight
Journaux YARN
Heap dump
Operations Management Suite
Mettre en oeuvre les solutions de traitement par lots
Stockage Apache Hive
Requêtes de données HDInsight via Hive et Pig
Mise en oeuvre de HDInsight
Conception de solutions ETL par lots pour le Big Data avec Spark
Qu'est
- ce que Spark ?
ETL avec Spark
Performance de Spark
Analyse des données avec Spark SQL
Mettre en oeuvre des requêtes itératives et interactives
Réaliser des analyses exploratoires des données
Analyse des données avec Hive et Phoenix
Mettre en oeuvre les requêtes interactives pour la Big Data avec Hive interactive
Réaliser une analyse exploratoire des données à l'aide de Hive
Réaliser un traitement interactif à l'aide d'Apache Phoenix
Stream Analytics
Analyse de flux
Traiter les données en continu à partir de l'analyse de flux
Gestion des travaux d'analyse de flux
Mise en oeuvre de solutions de diffusion avec Kafka et HBase
Créer et déployer un cluster Kafka
Publier, consommer et traiter les données via le cluster Kafka
Utiliser HBase pour stocker des données et effectuer des requêtes
Développement de solutions de traitement Big Data en temps réel avec Apache Storm
Persistance des données à long terme
Diffuser des données avec Storm
Créer des topologies Storm
Configurer Apache Storm
Création des applications Spark Streaming
Travailler avec Spark Streaming
Créer des applications de diffusion structurée Spark
Persistance et visualisation

Les compétences visées et évaluées par la certification Perform Data Engineering on Microsoft Azure HDInsight se répartissent en 2 grands axes qui constituent les principales missions de l'ingénieur de données :
- Administrer et fournir des clusters de données HDInsight pour faciliter le traitement de volumes importants de données au sein de l'entreprise, à la fois dans le stockage et dans l'analyse.
- Mettre en oeuvre des solutions de traitement pour le Big Data, de différentes natures (par paquet, interactives, temps réel), afin de répondre aux besoins des utilisateurs métiers qui traitent des données dans le cadre de leur fonction