Science des données cosine-distance

4

Alternatives à TF-IDF et similitude cosinus lors de la comparaison de documents de formats différents

J'ai travaillé sur un petit projet personnel qui prend les compétences professionnelles d'un utilisateur et suggère la carrière la plus idéale pour lui en fonction de ces compétences. J'utilise une base de données de listes d'emplois pour y parvenir. Pour le moment, le code fonctionne comme suit: 1) Traitez le …

12 nlp text-mining similarity cosine-distance

1

Calculer la similitude du cosinus dans Apache Spark

J'ai un DataFrame avec IDF de certains mots calculés. Par exemple (10,[0,1,2,3,4,5],[0.413734499590671,0.4244680552337798,0.4761400657781007, 1.4004620708967006,0.37876590175292424,0.48374466516332]) .... and so on Donnez maintenant une requête Q, je peux calculer le TF-IDF de cette requête. Comment calculer la similitude cosinus de la requête avec tous les documents dans la trame de données (il y a …

9 machine-learning nlp apache-spark cosine-distance

2

Quelle devrait être la valeur du champ non évalué lors de la recherche de la similitude cosinus

Je travaille sur un système de recommandation de livres très basique. Je veux savoir quoi faire avec les champs qui ne sont pas notés par l'utilisateur lors de la recherche de similitude cosinus, devons-nous les ignorer et calculer uniquement avec les champs notés ou devons-nous les marquer 0. Le livre …

8 correlation recommender-system cosine-distance

Questions marquées «cosine-distance»