Bonjour à tous,
à partir d'un couple mot/définition, je cherche un moyen de définir les sens d'un mot. Le but est de stocker puis réutiliser ces données dans des appli de reconnaissance d'entité nommé et de TALN en général. Par exemple, le mot lait peut prendre 4 sens:
-> liquide nutritif pour les petits mammifères,
-> matière première en cuisine,
-> préparation cosmétique,
-> sève de certains végétaux.
A votre avis, qu'est ce qui résume le mieux le sens d'une unité lexicale:
1. son hyperonyme ?
2. TF/IDF ?
3. Synonyme/antonyme ?
4. une autre idée ?
Hors ligne
Est-ce que tu as regardé du côté de word2vec et de ce genre de choses ?
Je ne sais pas si c'est réellement ce que tu recherches, mais c'est une piste...
Hors ligne
rohhh, l'algo word2vec semble parfait,
merci pour l'idée
l'as-tu déjà utilisé ?
Hors ligne
@DevForEver oui, enfin le même principe avec une autre librairie : https://github.com/facebookresearch/fastText
Le problème c'est qu'il fait un corpus énorme ainsi qu'une grosse machine pour avoir des résultats intéressants et utiles.
Bon courage.
Hors ligne
@NicolasWeb grâce à l'idée word2vec (et une boite de doliprane ), j'ai lu un peu de docs sur les outils dispo y compris fastText. Effectivement, y a vaut mieux prévoir de belles ressources hardware.
On va faire les essais avec fastText qui semble très bien.
Au delà de l'algo, je me demande si en fait le plus important ne serait pas plutôt le choix du corpus (Littre/Acamedie8/Encarta VS Top 50 Google).
N'étant pas un génie, on va partir sur une méthode partiellement voire fortement supervisée , y a p'être moyen d'automatiser par la suite.
Dernière modification par DevForEver (2018-09-25 17:00:47)
Hors ligne
Pour le corpus, regarder du côté du Wiktionnaire
Hors ligne