Statistiques et Big Data precision-recall

3

Suggestions pour un apprentissage sensible aux coûts dans un environnement très déséquilibré

J'ai un ensemble de données avec quelques millions de lignes et ~ 100 colonnes. Je voudrais détecter environ 1% des exemples dans l'ensemble de données, qui appartiennent à une classe commune. J'ai une contrainte de précision minimale, mais en raison d'un coût très asymétrique, je ne suis pas trop intéressé …

15 machine-learning classification unbalanced-classes precision-recall

2

L'augmentation du nombre de fonctionnalités entraîne une baisse de la précision mais une augmentation du préc / rappel

Je suis nouveau dans le Machine Learning. En ce moment, j'utilise un classifieur Naive Bayes (NB) pour classer les petits textes en 3 classes comme positifs, négatifs ou neutres, en utilisant NLTK et python. Après avoir effectué quelques tests, avec un ensemble de données composé de 300 000 instances (16 …

15 machine-learning classification naive-bayes precision-recall

2

Qu'est-ce que la «ligne de base» dans la courbe de rappel de précision

J'essaie de comprendre la courbe de rappel de précision, je comprends ce que sont la précision et le rappel, mais ce que je ne comprends pas, c'est la valeur "de base". Je lisais ce lien https://classeval.wordpress.com/introduction/introduction-to-the-precision-recall-plot/ et je ne comprends pas la partie de la ligne de base comme indiqué …

15 r machine-learning classification precision-recall

3

Quelles sont les différences entre AUC et F1-score?

F1-score est la moyenne harmonique de précision et de rappel. L'axe des y du rappel est le véritable taux positif (qui est également le rappel). Donc, parfois, les classificateurs peuvent avoir un faible rappel mais une ASC très élevée, qu'est-ce que cela signifie? Quelles sont les différences entre AUC et …

14 machine-learning precision-recall auc accuracy

4

Calcul de l'AUPR dans R [fermé]

Fermé. Cette question est hors sujet . Il n'accepte pas actuellement les réponses. Voulez-vous améliorer cette question? Mettez à jour la question afin qu'elle soit sur le sujet pour la validation croisée. Fermé il y a 7 mois . Il est facile de trouver une zone de calcul de package …

14 r precision-recall

2

Le coefficient de dés est-il le même que la précision?

Je rencontre le coefficient de dés pour la similitude du volume ( https://en.wikipedia.org/wiki/S%C3%B8rensen%E2%80%93Dice_coefficient ) et la précision ( https://en.wikipedia.org/wiki/Accuracy_and_precision ). Il me semble que ces deux mesures sont identiques. Des pensées?

13 descriptive-statistics roc accuracy precision-recall auc

5

Pourquoi la somme de la précision et du rappel n'est-elle pas une mesure valable?

Quelle est la meilleure façon d'expliquer pourquoi n'est pas une bonne mesure, par exemple, par rapport à F1?Précision + RappelPrecision+Recall\text{Precision} + \text{Recall}

12 precision-recall

1

Comment réduire le nombre de faux positifs?

J'essaie de résoudre une tâche appelée détection des piétons et j'entraîne le clasifer binaire sur deux catégories positives - personnes, négatives - en arrière-plan. J'ai un ensemble de données: nombre de positifs = 3752 nombre de négatifs = 3800 J'utilise train \ test split 80 \ 20% et RandomForestClassifier forme …

12 classification random-forest unbalanced-classes precision-recall computer-vision

2

Comment comparer deux algorithmes de classement?

Je veux comparer deux algorithmes de classement. Dans ces algorithmes, le client spécifie certaines conditions dans sa recherche. Selon les exigences du client, ces algorithmes doivent attribuer un score pour chaque élément de la base de données et récupérer les éléments ayant les scores les plus élevés. J'ai lu différents …

12 machine-learning precision-recall average-precision

1

Comment former une courbe de précision-rappel lorsque je n'ai qu'une seule valeur pour PR?

J'ai une mission d'exploration de données où je crée un système de récupération d'images basé sur le contenu. J'ai 20 images de 5 animaux. Donc au total 100 images. Mon système renvoie les 10 images les plus pertinentes à une image d'entrée. Je dois maintenant évaluer les performances de mon …

12 data-mining matlab precision-recall curves computer-vision

2

Pourquoi n'utilisons-nous pas la moyenne arithmétique pondérée au lieu de la moyenne harmonique?

Je me demande quelle est la valeur intrinsèque de l'utilisation de la moyenne harmonique (par exemple pour calculer les mesures F), par opposition à la moyenne arithmétique pondérée pour combiner précision et rappel? Je pense que la moyenne arithmétique pondérée pourrait jouer le rôle de moyenne harmonique, ou est-ce que …

12 machine-learning monte-carlo precision-recall harmonic-mean

1

Test de signification basé sur la précision / rappel / F1

Est-il possible de faire un test de signification basé uniquement sur les scores de précision / rappel / F1? Par exemple, si vous rencontrez 2 systèmes dans un document pour lesquels seuls P / R / F1 sont rapportés (sur le même ensemble de données, etc.), pouvez-vous alors effectuer un …

12 statistical-significance precision-recall

5

Comment calculer la précision et le rappel dans une matrice de confusion 3 x 3

Predicted class Cat Dog Rabbit Actual class Cat 5 3 0 Dog 2 3 1 Rabbit 0 2 11 Comment puis-je calculer la précision et le rappel pour qu'il devienne facile de calculer le score F1. La matrice de confusion normale est une dimension 2 x 2. Cependant, quand il …

12 machine-learning precision-recall

1

Précision moyenne et rappel lors de l'utilisation de la validation croisée

J'ai effectué une classification en utilisant plusieurs classificateurs pour des données étiquetées à 2 classes, et j'ai utilisé une validation croisée 5 fois. Pour chaque pli, j'ai calculé tp, tn, fp et fn. Ensuite, j'ai calculé l'exactitude, la précision, le rappel et le score F pour chaque test. Ma question …

11 classification cross-validation precision-recall

3

Comment choisir un bon point de fonctionnement à partir de courbes de rappel de précision?

Existe-t-il une méthode standard pour déterminer un point de fonctionnement "optimal" sur une courbe de rappel de précision ? (c.-à-d. déterminer le point de la courbe qui offre un bon compromis entre précision et rappel) Merci

11 machine-learning precision-recall

Questions marquées «precision-recall»