NLP Financier : utiliser l’embedding pour nettoyer le périmètre avant d’entraîner un transformer

Série Market-RSS-Sentiment — Épisode 3 Dans l’épisode 2, j’avais noté 1 281 couples (article, entreprise) à l’aide de LLM et annoté 101 articles à la main. Il me restait à entraîner un modèle transformer local — gratuit, instantané, qui n’aurait plus besoin d’appeler la moindre API pour noter un article. Ce billet raconte la suite de cette

Extracting summarization avec TF-IDF

1. Le Bag of Words Le sac de mots (BoW) est une technique de traitement du langage naturel (NLP). La représentation de nos textes sous forme de sac de mot permet de vectoriser notre corpus et ainsi d’avoir une représentation numérique de chaque texte.Un sac de mots est basé sur l’occurrence des mots dans un document. Le processus commence par l’identification du