Outils pour utilisateurs
Outils du site
site:enseignement:master:bdle:tmes:algebrespark
Différences
Ci-dessous, les différences entre deux révisions de la page.
| Les deux révisions précédentes Révision précédente Prochaine révision | Révision précédente | ||
|
site:enseignement:master:bdle:tmes:algebrespark [25/10/2017 18:39] amine [Exercice 3] |
site:enseignement:master:bdle:tmes:algebrespark [09/10/2018 14:12] (Version actuelle) amine |
||
|---|---|---|---|
| Ligne 2: | Ligne 2: | ||
| - | ====== [TME II-3] Algèbre Spark: Dataset ====== | + | ====== [TME II-2] Algèbre Spark: Dataset ====== |
| Ce TME aborde le traitement de requêtes Sparql dans la plateforme Spark. | Ce TME aborde le traitement de requêtes Sparql dans la plateforme Spark. | ||
| * Formulation des requêtes dans le langage Scala avec les API de Spark RDD et Dataset. | * Formulation des requêtes dans le langage Scala avec les API de Spark RDD et Dataset. | ||
| Ligne 17: | Ligne 17: | ||
| </code> | </code> | ||
| + | <showif isloggedin> | ||
| + | **TODO (oct 2017): page MPI pour sparql endpoint sur Yago** | ||
| + | </showif> | ||
| Aller dans votre répertoire de travail et lancer le spark-shell avec l'option <fc #ff0000>--driver-memory 10G</fc> | Aller dans votre répertoire de travail et lancer le spark-shell avec l'option <fc #ff0000>--driver-memory 10G</fc> | ||
| Ligne 37: | Ligne 40: | ||
| Exemple, soient les trois triplets suivants : | Exemple, soient les trois triplets suivants : | ||
| (james joue guitare) (marie joue piano) (james ami_de marie) (marie ami_de james) | (james joue guitare) (marie joue piano) (james ami_de marie) (marie ami_de james) | ||
| - | le motif ( ?x joue piano) retourne la liaison ?x->james | + | le motif ( ?x joue piano) retourne la liaison ?x->marie |
| le motif ( ?x joue ?y) retourne les liaisons ?x->james, ?y-> guitare d’une part et | le motif ( ?x joue ?y) retourne les liaisons ?x->james, ?y-> guitare d’une part et | ||
| ?x->maire, ?y->piano d’autre part. | ?x->maire, ?y->piano d’autre part. | ||
| Ligne 200: | Ligne 203: | ||
| </showif> | </showif> | ||
| - | Le résultat doit être: | + | Les 5 premiers éléments du résultat sont : |
| <code> | <code> | ||
| | y | x | | | y | x | | ||
| Ligne 259: | Ligne 262: | ||
| </showif> | </showif> | ||
| - | Le résultat doit être: | + | Le résultat, limité à 10 lignes, doit être: |
| <code> | <code> | ||
| +--------------+----------+---------+-----------------+--------------------+----------------+ | +--------------+----------+---------+-----------------+--------------------+----------------+ | ||
| Ligne 293: | Ligne 296: | ||
| - | ===== Exercice 2 : Requêtes sur Freebase===== | + | ===== Exercice subsidiaire : Requêtes sur Freebase===== |
| L’objectif de cet exercice est d’exprimer en Scala les différents types de motifs complexes. | L’objectif de cet exercice est d’exprimer en Scala les différents types de motifs complexes. | ||
site/enseignement/master/bdle/tmes/algebrespark.1508949591.txt.gz · Dernière modification: 25/10/2017 18:39 par amine
Outils de la page
Sauf mention contraire, le contenu de ce wiki est placé sous les termes de la licence suivante : CC Attribution-Noncommercial-Share Alike 3.0 Unported
