3RgR4FRnMPQ9|PUBLIC_DATASET]] ou localement dans /Infos/bd/spark/dataset
Préparation : créer un répert... .dat users.dat et ratings.dat
<code bash>
cp -r /Infos/bd/spark/dataset/movielens /tmp/BDLE/dataset
cd /... nts.
<code bash>
cd /tmp/BDLE/dataset
tar zxvf /Infos/bd/spark/dataset/watdiv/watdiv1M.tgz
</code>
Exe... propriétés les plus fréquentes :
<code bash>
cp /Infos/bd/spark/dataset/dbpedia/dbpediaShortName8MProper
ronnement et doc des API===
<code bash>
source /Infos/bd/spark-config
idea.sh &
</code>
Dans IDEA : im... votre projet s'appelle BDLE :
<code bash>
cd
cp /Infos/bd/spark/PartitionEtudiant.scala IdeaProjects/BDL... rk-shell --driver-memory 10G --properties-file /Infos/bd/spark/prop.txt'
Puis lancer le spark-shell
<co... spark-shell --driver-memory 8G --properties-file /Infos/bd/spark/prop.txt
</code>
Puis quand l'invite **
e, en salle de TME, en tapant
<code bash>
source /Infos/bd/spark/config.sh
which spark-shell
</code>
cela... .bashrc'' la ligne suivante :
<code bash>
source /Infos/bd/spark/config.sh
</code>
Puis lancer le client ... ------------ ANCIEN Noteboook
<code bash>
unzip /Infos/bd/spark/spark-notebook-master-scala-2.11.8-spark... conseillé) ====
Insérer le contenu du fichier ///Infos/bd/spark/spark-emacs.el// dans votre propre fichi
/tmp/BDLE/dataset
cd /tmp/BDLE/dataset
tar zxvf /Infos/bd/spark/dataset/freebase/freebase_snippet_surls.tgz
tar zxvf /Infos/bd/spark/dataset/yago/yagoFacts5M.tgz
cp /Infos/bd/spark/dataset/yago/yagoMiniSample.txt /tmp/BDLE/data... o =====
Lire un exemple de données
<code>
more /Infos/bd/spark/dataset/yago/yagoMiniSample.txt
</code>
.bash_profile et ~/.bashrc
cd
echo source /Infos/bd/config10 >> .bash_profile
echo source /Infos/bd/config10 >> .bashrc
* **Vérification** : les fi... hrc doivent se terminer par la ligne :
source /Infos/bd/config10
* Fermer ensuite la session Linux ... : la commande //which sqlplus// doit répondre : /Infos/bd/**client10**/sqlplus
* En cas de problème, v
=====
<code bash>
cd votre répertoire
tar zxvf /Infos/bd/kvstore/kv-ce-3.1.7.tar.gz
cd kv-3.1.7
source /Infos/bd/kvstore/config-java-classpath-kvlite.txt
</cod... upérer les fichiers du TME
<code bash>
tar zxvf /Infos/bd/kvstore/kvstore-etu.tgz
cd kvstore-etu
</code... itialier le store
<code bash>
cd kv-3.1.7
source /Infos/bd/kvstore/config-java-classpath-kvlite.txt
cd ..
onnement Linux en tapant :
cd
echo source /Infos/bd/config11 >> .bashrc
echo source /Infos/bd/config11 >> .bash_profile
et en tapant
mkdir ~/.emacs.d
cp /Infos/bd/init.el ~/.emacs.d/init.el
2. Exécutez la... la commande ''which sqlplus'' doit répondre : ''/Infos/bd/client11/instantclient_11_2/sqlplus''
Dans un
ui utilisent Eclipse doivent référencer le jar ''/Infos/bd/client11/ojdbc6.jar'' dans leur projet. Eclips... ectionner, depuis la racine ''/'', le fichier ''/Infos/bd/client11/ojdbc6.jar''
* Ok
===== Séance 1... **Différence entre sqlplus et jdbc concernant les infos de connexion**. Sous sqlplus, vous utilisez des alias qui correspondent aux infos de connexion de jdbc : ora10 correspond à la bas
en tapant <code bash> mkdir /tmp/jena && tar xzf /Infos/bd/sparql/apache-jena-2.12.1.tar.gz -C /tmp/jena<... e d'environnement $PATH en tapant <code bash>cat /Infos/bd/sparql/jena-export.txt >> ~/.bashrc && source ... es dans l'archive en tapant
<code bash> tar xvf /Infos/bd/sparql/TME-RDF.tar
cd TME-RDF </code>
puis vé
=
Désarchiver dans votre espace perso <code bash>/Infos/bd/spark/dataset/tpch/tpch-extrait.tgz</code>
L'a... =====
Les extrait du cours sont dans <code bash>/Infos/bd/spark/dataset/json/json_samples.tar</code>
Cha
ommande <code> cd répertoire_de_travail
unzip /Infos/bd/public/tmexpath.zip
</code>
*/
/** {{:site:ens... &</code>. En cas d'erreur, <code bash> java -jar /Infos/bd/public/tool/xpe/xpe.jar </code>
*/
Dans Base
manipuler le graphe se trouvant dans
le dossier /Infos/bd/spark/dataset/arxiv/graphe_similarite
<code bash>
cd /Infos/bd/spark/dataset/arxiv/graphe_similarite/40_topic