Big data (rapport de stage)

• I. Résumé
  
• Remerciements
  
• Sommaire
  
• Liste des abréviations
  
• II. Introduction générale
  
• III. Présentation de l'entreprise et du contexte de stage
  
  • III.1 Présentation de L'entreprise
    
    • III.1.1 Historique et secteur d'activité
      
    • III.1.2 Valeurs
      
    • III.1.3 Mission
      
    • III.1.4 Métiers et secteurs d'activité
      
    • III.1.5 Partenariats et concurrence
      
    • III.1.6 Organisation
      
  • III.2 Contexte du stage
    
• IV. Présentation de la mission lors du stage
  
  • IV.1 Collecte et analyse de la documentation
    
  • IV.2 Tests techniques et montée en compétence opérationnel
    
  • IV.3 Réalisation de la plateforme de démonstration
    
• V. Les Big Data
  
  • V.1 Présentation
    
  • V.2 Caractéristiques des Big Data
    
  • V.3 Les Big Data en chiffres
    
  • V.4 Intérêts des Big Data
    
  • V.5 Enjeux des Big Data
    
    • V.5.1 Enjeux techniques
      
    • V.5.2 Enjeux économiques
      
    • V.5.3 Enjeux juridiques
      
  • V.6 Limites des Big Data
    
  • V.7 Paysage technologique des Big Data
    
    • V.7.1 Intégration
      
    • V.7.2 Stockage
      
    • V.7.3 Analyse
      
    • V.7.4 Restitution
      
  • V.8 Ecosystème Hadoop
    
    • V.8.1 Hadoop kernel
      
      • V.8.1.1 Architecture Hadoop
        
      • V.8.1.2 HDFS
        
      • V.8.1.3 MapReduce
        
      • V.8.1.4 Modes d'utilisation
        
    • V.8.2 Composants Apache Hadoop
      
      • V.8.2.1 Hbase
        
      • V.8.2.2 HaCatalog
        
      • V.8.2.3 Hive
        
      • V.8.2.4 Pig
        
      • V.8.2.5 Sqoop
        
      • V.8.2.6 Flume
        
      • V.8.2.7 Oozie
        
      • V.8.2.8 Zookeeper
        
      • V.8.2.9 Ambari
        
      • V.8.2.10 Mahout
        
      • V.8.2.11 Avro
        
  • V.9 Solutions Big Data sur le marché
    
• VI. Solution mise en place
  
  • VI.1 Choix de la solution et tests techniques réalisés
    
    • VI.1.1 Architecture du cluster mise en place
      
    • VI.1.2 Architectures des composants des machines
      
      • VI.1.2.1 Serveur maître
        
      • VI.1.2.2 Serveur esclave
        
    • VI.1.3 Déploiement de la plateforme 
      
    • VI.1.4 Tests techniques réalisés
      
      • VI.1.4.1 But des tests
        
      • VI.1.4.2 Test de l'environnement existant
        
      • VI.1.4.3 Test sur le nouvel environnement
        
        • VI.1.4.3.1 Traitement de données avec Mapreduce et HDFS
          
        • VI.1.4.3.2 Restitution des données
          
        • VI.1.4.3.3 Test de scalabilité et traitements distribués
          
  • VI.2 Démonstrateur Big Data
    
    • VI.2.1 Création des jeux de donnée de test
      
      • VI.2.1.1 Cas d'utilisation 1
        
      • VI.2.1.2 Cas d'utilisation 2
        
      • VI.2.1.3 Cas d'utilisation 3
        
    • VI.2.2 Scénario d'exécution des cas d'utilisation
      
    • VI.2.3 Création des programmes MapReduce
      
    • VI.2.4 Restitution des données via Hive
      
    • VI.2.5 Restitution des données via QlikView
      
      • VI.2.5.1 Cas d'utilisation 1
        
      • VI.2.5.2 Cas d'utilisation 2
        
      • VI.2.5.3 Cas d'utilisation 3
        
  • VI.3 Outils utilisés
    
• VII. Futur du Big Data
  
• VIII. Bilan du stage
  
  • VIII.1 Planning prévisionnel
    
  • VIII.2 Planning de réalisation
    
  • VIII.3 Livrables
    
  • VIII.4 Difficultés rencontrées
    
  • VIII.5 Solutions
    
  • VIII.6 Projet big data
    
  • VIII.7 Apport du stage
    
• IX. Conclusion
  
• Références bibliographiques
  
• Liste des figures
  
• Liste des tableaux