RnMPQ9|PUBLIC_DATASET]] ou localement dans /Infos/bd/spark/dataset
Préparation : créer un répertoir... sers.dat et ratings.dat
<code bash>
cp -r /Infos/bd/spark/dataset/movielens /tmp/BDLE/dataset
cd /tmp...
<code bash>
cd /tmp/BDLE/dataset
tar zxvf /Infos/bd/spark/dataset/watdiv/watdiv1M.tgz
</code>
Exempl... iétés les plus fréquentes :
<code bash>
cp /Infos/bd/spark/dataset/dbpedia/dbpediaShortName8MPropertie
ant à la séance de TME.
* TME7 : [[http://www-bd.lip6.fr/wiki/site/enseignement/licence/2i009/donnees-astronomiques| BD-données-astronomiques]], [[http://www-bd.lip6.fr/wiki/site/enseignement/licence/2i009/donnees-foofle-h2| BD-données-Foofle]]
* TME5, 6 et 7 : [[http://www
hive}}
Vous pouvez télécharger les données des BD utilisées en TME pour Oracle ou pour H2.
^ Semai... L partie 1 | Jeux Olympiques - V1 | [[http://www-bd.lip6.fr/ens/2I009_2015/bd-jo-v1_oracle.html|SQL]] | [[http://www-bd.lip6.fr/ens/2I009_2015/bd-jo-v1_H2.html| SQL]] |
| 6-8 |
ant à la séance de TME.
* TME7 : [[http://www-bd.lip6.fr/wiki/site/enseignement/licence/2i009/donnees-astronomiques| BD-données-astronomiques]], [[http://www-bd.lip6.fr/wiki/site/enseignement/licence/2i009/donnees-foofle-h2| BD-données-Foofle]]
* TME5, 6 et 7 : [[http://www
ent et doc des API===
<code bash>
source /Infos/bd/spark-config
idea.sh &
</code>
Dans IDEA : impor... projet s'appelle BDLE :
<code bash>
cd
cp /Infos/bd/spark/PartitionEtudiant.scala IdeaProjects/BDLE/s... ll --driver-memory 10G --properties-file /Infos/bd/spark/prop.txt'
Puis lancer le spark-shell
<code ... shell --driver-memory 8G --properties-file /Infos/bd/spark/prop.txt
</code>
Puis quand l'invite **sca
r les tables et charger les données: [[http://www-bd.lip6.fr/ens/2I009_2015/bd-jo-v1_H2.html|BD-JeuxOlympiques-v1]]
On considère le schéma de la base JeuxOlympique2014 donné en TD... 80>Une représentation graphique du schéma pour la BD JO_v2 se trouve {{:site:enseignement:licence:2i00
salle de TME, en tapant
<code bash>
source /Infos/bd/spark/config.sh
which spark-shell
</code>
cela do... c'' la ligne suivante :
<code bash>
source /Infos/bd/spark/config.sh
</code>
Puis lancer le client Spa... ------ ANCIEN Noteboook
<code bash>
unzip /Infos/bd/spark/spark-notebook-master-scala-2.11.8-spark-2.... illé) ====
Insérer le contenu du fichier ///Infos/bd/spark/spark-emacs.el// dans votre propre fichier
connecté !</fc>** en tant que membre de l'équipe BD
</showif>
L'objectif de ce TME est de mettre en ... NetworkServer'' et ''bin/ij''
===Remarques===
La BD utilisée pour ce TME est [[https://docs.oracle.co... ava DB]], la version implémentée par Oracle de la BD open source [[https://db.apache.org/derby/| Derby... B, exécuter la commande suivante afin de créer la BD :
<code ascii>
ij> CONNECT 'jdbc:derby://loca
nt Linux en tapant :
cd
echo source /Infos/bd/config11 >> .bashrc
echo source /Infos/bd/config11 >> .bash_profile
et en tapant
mkdir ~/.emacs.d
cp /Infos/bd/init.el ~/.emacs.d/init.el
2. Exécutez la co... mmande ''which sqlplus'' doit répondre : ''/Infos/bd/client11/instantclient_11_2/sqlplus''
Dans un pr
> # aller dans votre répertoire de tme
cp /Infos/bd/spark/tme-dataset-etudiant.scala .
emacs tme-data... r l'environnement====
<code bash>
source /Infos/bd/spark-config
</code>
Vérifier l'alias pour le s... ll --driver-memory 10G --properties-file /Infos/bd/spark/prop.txt'
Puis lancer le spark-shell
<code ... shell --driver-memory 8G --properties-file /Infos/bd/spark/prop.txt
</code>
Puis quand l'invite **sca