Ci-dessous, les différences entre deux révisions de la page.
Les deux révisions précédentes Révision précédente Prochaine révision | Révision précédente | ||
site:enseignement:master:bdle:tmes:dataset [24/09/2018 12:25] hubert [YAGO] |
site:enseignement:master:bdle:tmes:dataset [12/10/2019 18:39] (Version actuelle) hubert [Jeux de données] |
||
---|---|---|---|
Ligne 5: | Ligne 5: | ||
Cette page liste les jeux de données utilisables pour les TME de BDLE. | Cette page liste les jeux de données utilisables pour les TME de BDLE. | ||
+ | Ils sont disponibles en ligne dans [[https://nuage.lip6.fr/s/PQM3RgR4FRnMPQ9|PUBLIC_DATASET]] ou localement dans /Infos/bd/spark/dataset | ||
+ | |||
+ | |||
Préparation : créer un répertoire /tmp/BDLE/dataset pour disposer temporairement des données. | Préparation : créer un répertoire /tmp/BDLE/dataset pour disposer temporairement des données. | ||
Ligne 63: | Ligne 66: | ||
==== YAGO ==== | ==== YAGO ==== | ||
- | Des données issues de YAGO. Ce sont des triplets RDF. | + | Des données issues de YAGO. Ce sont des triplets RDF (sujet, propriété, objet) |
Le jeux de données Yago3 complet contient plus de 100 millions de triplets. Pour faciliter les TME, on manipule un extrait contenant 5 millions de triplets : | Le jeux de données Yago3 complet contient plus de 100 millions de triplets. Pour faciliter les TME, on manipule un extrait contenant 5 millions de triplets : | ||
* on considère seulement les faits : ce sont les triplets reliant deux ressources (aucun littéral). | * on considère seulement les faits : ce sont les triplets reliant deux ressources (aucun littéral). | ||
- | * on ne garde que les faits reliant des ressources dont le degré (dans le graphe de tous les faits) est supérieur à 5. | + | * on ne garde que les faits concernant un sujet relié à au moins 5 objets (ie. il y a au moins 5 faits dans Yago3 pour ce sujet), et un objet relié à au moins 5 sujets. |
Pour récupérer les triplets : | Pour récupérer les triplets : | ||
Ligne 129: | Ligne 132: | ||
+ | |||
+ | Retour vers les [[site:enseignement:master:bdle:tmes:]] |