site:enseignement:master:bdle:tmes:tme3-prise-main-spark
Différences
Ci-dessous, les différences entre deux révisions de la page.
Les deux révisions précédentesRévision précédenteProchaine révision | Révision précédente | ||
site:enseignement:master:bdle:tmes:tme3-prise-main-spark [12/10/2018 11:05] – [Exercice 1] amine | site:enseignement:master:bdle:tmes:tme3-prise-main-spark [15/10/2018 09:09] (Version actuelle) – [Interrogation des données] amine | ||
---|---|---|---|
Ligne 13: | Ligne 13: | ||
Lancer le spark-shell en mode local ([[spark|voir Doc]]) en suivant les instructions fournies | Lancer le spark-shell en mode local ([[spark|voir Doc]]) en suivant les instructions fournies | ||
puis charger le fichier | puis charger le fichier | ||
- | < | + | < |
au moyen de la méthode textFile() invoquée à partir de la variable context comme suit : | au moyen de la méthode textFile() invoquée à partir de la variable context comme suit : | ||
- | < | + | < |
Ligne 84: | Ligne 84: | ||
* films (MovieID, Title, Genres) | * films (MovieID, Title, Genres) | ||
- | === Structure de donnée : Dataset=== | + | |
- | Pour le TME sur les Dataset, récupérer le fichier suivant: | + | |
- | <code bash> | + | |
- | cp / | + | |
- | emacs tme-dataset-etudiant.scala & | + | |
- | </ | + | |
Ligne 136: | Ligne 131: | ||
</ | </ | ||
</ | </ | ||
+ | |||
+ | |||
+ | === Exercice Subsidiaire : reprendre les questions précédentes en utilisant l'API Dataset === | ||
+ | Pour utiliser les Dataset, récupérer le fichier suivant: | ||
+ | <code bash> | ||
+ | cp / | ||
+ | emacs tme-dataset-etudiant.scala & | ||
+ | </ | ||
+ | |||
+ |
site/enseignement/master/bdle/tmes/tme3-prise-main-spark.1539335146.txt.gz · Dernière modification : de amine