partage/nlp_a2019_tp3
1
0
Fork 0
Code Issues Pull requests Projects Releases Packages Wiki Activity
No description
15 commits 1 branch 0 tags 5.2 MiB
Jupyter Notebook 87.5%
HTML 4.9%
TeX 4.5%
Python 2.7%
Makefile 0.3%
Other 0.1%
Find a file
François Pelletier cccf166324 ajout 2 slides
2020-01-22 00:23:11 -05:00
slides ajout 2 slides 2020-01-22 00:23:11 -05:00
visuels slides et visuels 2020-01-20 23:58:28 -05:00
.gitignore version finale 2019-12-28 00:35:13 -05:00
analyse_articles.ipynb version finale 2019-12-28 00:35:13 -05:00
commentaires.ipynb préparation données terminée 2019-12-16 18:25:47 -05:00
commentaires_reseaux_sociaux.mm ajout quelques paragraphes au rapport 2019-12-21 15:39:12 -05:00
Makefile version finale 2019-12-28 00:35:13 -05:00
NLP-TP3.bib version finale 2019-12-28 00:35:13 -05:00
parsing_functions.py commit initial 2019-12-15 20:31:38 -05:00
pretraitement.py préparation données terminée 2019-12-16 18:25:47 -05:00
rapport.md version finale 2019-12-28 00:35:13 -05:00
README.md ajouts description algorithmes au rapport 2019-12-27 20:27:21 -05:00
textes_articles.ipynb slides et visuels 2020-01-20 23:58:28 -05:00
traitement_articles.ipynb version finale 2019-12-28 00:35:13 -05:00
traitement_commentaires.ipynb version finale 2019-12-28 00:35:13 -05:00
transactions-on-speech-and-language-processing.csl ajout début du rapport 2019-12-19 00:25:23 -05:00
wn_pos_from_ud_pos.py ajout de plusieurs graphiques et métriques dans le rapport 2019-12-27 00:26:38 -05:00

README.md

Travail pratique 3

Cours: IFT-7022 Session: Automne 2019 Auteur: François Pelletier

Installation des dépendances du projet

Installer Anaconda3 depuis https://www.anaconda.com/distribution/#download-section

Installer ces paquets additionnels dans l'environnement

pip install newspaper3k
pip install emoji
pip install git+https://github.com/ClaudeCoulombe/FrenchLefffLemmatizer.git

Installations des dépendances de nltk

import nltk
nltk.download('wordnet')
nltk.download('omw')

Obtenir CoreNLP

Télécharger CoreNLP depuis

https://stanfordnlp.github.io/CoreNLP/download.html

  • Le fichier principal: stanford-corenlp-full-2018-10-05.zip
  • Les fichiers de modèles pour le français, à mettre dans le même dossier que CoreNLP: stanford-french-corenlp-2018-10-05-models.jar

Démarrer le serveur CoreNLP

Exécuter cette commande dans le répertoire de CoreNLP

java -mx4g -cp "*" edu.stanford.nlp.pipeline.StanfordCoreNLPServer -serverProperties StanfordCoreNLP-french.properties -preload tokenize,ssplit,pos,lemma,ner,parse,depparse -status_port 9000 -port 9000 -timeout 15000 &

Compilation du rapport en PDF (requiert pandoc et texlive, a installer depuis les paquets de la distribution linux utilisée):

make