repertoire GITHUB
Problématique et déroulement du projet
Le projet est là pour nous sensibiliser au problème du passage à l’échelle. Nous allons ici simuler un logiciel de reconnaissance de fruits.
Le projet nous permet de prendre en main AWS, de créer une instance, de stocker nos images, de sécuriser les accès.
Nous utilisons aussi SPARK pour le passage à l’échelle.
Compétences acquises
- Paralléliser des opérations de calcul avec Pyspark
- Utiliser les outils du cloud pour manipuler des données dans un environnement Big Data
- Identifier les outils du cloud permettant de mettre en place un environnement Big Data
