Formation BigData, architecture et technologies


-2 jour | 5-PP-BIG 


1. Introduction
Le besoin : volumes importants de données, traitements optimisés de flux de données au fil de l'eau (nouvelles technologies et nouveaux usages).
Domaines concernés : recherche scientifique, médical, e-commerce, sécurité, ...
Développement des techniques sur différents aspects : stockage, indexation/recherche, calcul
Définition de ETL : Extract Transform Load
Les acteurs aujourd'hui
2. Stockage
Caractéristiques NoSQL :
Structure de données proches des utilisateurs, développeurs
Données structurées et non structurées, documents, images,
Fichiers XML, JSON, CSV, ...
Les différents modes et formats de stockage
Stockage réparti : réplication, sharping, gossip protocl, hachage,
Systèmes de fichiers distribués : GFS, HDFS, BigTable, ...
Les bases de données
Quelques exemples de produits et leurs caractéristiques : cassandra, MongoDB, CouchDB, DynamoDB...
3. Indexation et recherche
Moteurs de recherche
Principe de fonctionnement
Méthodes d'indexation
Exemple de Lucene, et mise en oeuvre avec solr
Recherche dans les bases de volumes importants
Exemples de produits et comparaison : dremel, drill, elasticsearch, MapReduce...
4. Calcul et restitution, intégration
Différentes solutions : calculs en mode batch, ou en temps réel, sur des flux de données ou des données statiques.
Les produits : langage de calculs statistiques, R Statistics Language
Outils de calcul sur des volumes importants : storm en temps réel, hadoop en mode batch.
Zoom sur Hadoop : complémentarité de HDMS et MapReduce.
5. Evolutions
Les offres Saas BigData, type Google BigQuery.
Les limites actuelles. Les avancées annoncées.


Objectifs

Comprendre les concepts du BigData et connaître les technologies associées.

Pré-requis

PUBLIC : Chefs de projets, architectes, et toute personne souhaitant connaître les outils et solutions pour mettre en place une architecture BigData.
PREREQUIS : bonne culture générale sur les systèmes d'information.

Moyen pédagogique

Réflexion de groupe et apports théoriques du formateur
Travail d'échange avec les participants sous forme de réunion-discussion
Utilisation de cas concrets issus de l'expérience professionnelle
Validation des acquis par des questionnaires, des tests d'évaluation, des mises en situation et des jeux pédagogiques.
Remise d'un support de cours.

Moyen technique

Accueil des stagiaires dans une salle dédiée à la formation, équipée d'ordinateurs, d'un vidéo projecteur d'un tableau blanc et de paperboard.

Modalités d'organisation

Horaires – de 9h00 à 12h30 et de 13h30 à 17h00

Modalités d'évaluation

Feuille de présence signée en demi-journée,
Evaluation des acquis tout au long de la formation,
Questionnaire de satisfaction,
Attestation de stage à chaque apprenant,
Positionnement préalable oral ou écrit,
Evaluation formative tout au long de la formation,
Evaluation sommative faite par le formateur ou à l'aide des certifications disponibles

Modalités distantes

A l'aide d'un logiciel comme Teams, Zoom etc... un micro et éventuellement une caméra pour l'apprenant,
suivez une formation en temps réel et entièrement à distance. Lors de la classe en ligne, les apprenants interagissent et comuniquent entre eux et avec le formateur.
Les formations en distanciel sont organisées en Inter-Entreprise comme en Intra-Entreprise.
L'accès à l'environnement d'apprentissage (support de cours, labs) ainsi qu'aux preuves de suivi et d'assiduité (émargement, évaluation) est assuré.

Profil du formateur

Nos formateurs sont des experts dans leurs domaines d'intervention
Leur expérience de terrain et leurs qualités pédagogiques constituent un gage de qualité.

Accessibilité

Les personnes atteintes de handicap souhaitant suivre cette formation sont invitées à nous contacter directement, afin d'étudier ensemble les possibilités de suivre la formation.

Durée : -2 jour

Télécharger le fichier PDF

Télécharger ce plan de cours au format PDF
 
 
 
Prochaines formations
inter entreprises à Lille
Du 21-04 au 23-04-21 Réserver
Du 05-07 au 07-07-21 Réserver
Du 25-08 au 27-08-21 Réserver
Du 06-09 au 07-09-21 Réserver
Du 06-10 au 08-10-21 Réserver
Du 04-11 au 05-11-21 Réserver
Du 01-12 au 03-12-21 Réserver