Statistiques et Big Data precision-recall

3

Classificateur avec précision réglable vs rappel

Je travaille sur un problème de classification binaire où il est beaucoup plus important de ne pas avoir de faux positifs; beaucoup de faux négatifs sont ok. J'ai utilisé un tas de classificateurs dans sklearn par exemple, mais je pense qu'aucun d'entre eux n'a la capacité d'ajuster explicitement le compromis …

11 classification precision-recall

3

Qu'est-ce qu'une bonne ASC pour une courbe de rappel de précision?

Parce que j'ai un ensemble de données très déséquilibré (9% de résultats positifs), j'ai décidé qu'une courbe de rappel de précision était plus appropriée qu'une courbe ROC. J'ai obtenu la mesure sommaire analogue de l'aire sous la courbe PR (.49, si vous êtes intéressé), mais je ne sais pas comment …

11 classification precision-recall auc

3

Rappel élevé - faible précision pour un ensemble de données déséquilibré

Je rencontre actuellement des problèmes lors de l'analyse d'un ensemble de données de tweet avec des machines à vecteurs de support. Le problème est que j'ai un ensemble d'entraînement en classe binaire déséquilibré (5: 2); qui devrait être proportionnelle à la distribution réelle des classes. Lors de la prédiction, j'obtiens …

11 machine-learning classification svm unbalanced-classes precision-recall

3

Le «bon» classificateur a détruit ma courbe de précision-rappel. Qu'est-il arrivé?

Je travaille avec des données déséquilibrées, où il y a environ 40 cas class = 0 pour chaque classe = 1. Je peux raisonnablement faire la distinction entre les classes en utilisant des fonctionnalités individuelles, et la formation d'un classificateur naïf Bayes et SVM sur 6 fonctionnalités et des données …

11 classification svm roc naive-bayes precision-recall

5

Pourquoi le score bêta définit-il la bêta comme ça?

Il s'agit du score F beta: Fβ=(1+β2)⋅precision⋅recall(β2⋅precision)+recallFβ=(1+β2)⋅precision⋅recall(β2⋅precision)+recallF_\beta = (1 + \beta^2) \cdot \frac{\mathrm{precision} \cdot \mathrm{recall}}{(\beta^2 \cdot \mathrm{precision}) + \mathrm{recall}} L'article de Wikipedia indique que .FβFβF_\beta "measures the effectiveness of retrieval with respect to a user who attaches β times as much importance to recall as precision" Je n'ai pas compris …

10 machine-learning precision-recall model-evaluation

1

Interprétation de l'aire sous la courbe PR

Je compare actuellement trois méthodes et j'ai la précision, auROC et auPR comme métriques. Et j'ai les résultats suivants: Méthode A - acc: 0,75, auROC: 0,75, auPR: 0,45 Méthode B - acc: 0,65, auROC: 0,55, auPR: 0,40 Méthode C - acc: 0,55, auROC: 0,70, auPR: 0,65 J'ai une bonne compréhension …

10 machine-learning roc precision-recall

1

Pourquoi le rappel ne prend-il pas en compte les vrais négatifs?

Pourquoi le rappel ne prend-il pas en compte les vrais négatifs? Dans les expériences où les vrais négatifs sont tout aussi importants que les vrais positifs, leur métrique comparable en tient-elle compte?

10 precision-recall

1

Comment le seuil de probabilité d'un classificateur peut-il être ajusté en cas de classes multiples? [dupliquer]

Cette question a déjà une réponse ici : Comment seuiller la prédiction de probabilité multiclasse pour obtenir une matrice de confusion? (1 réponse) Fermé il y a 3 mois . Ce qui précède est un exemple très simple d'avoir une sortie de classificateur de probabilité pour un cas de classe …

10 probability classification precision-recall multi-class

1

seuil de classification dans RandomForest-sklearn

1) Comment puis-je changer le seuil de classification (je pense que c'est 0,5 par défaut) dans RandomForest dans sklearn? 2) Comment puis-je sous-échantillonner dans Sklearn? 3) J'ai le résultat suivant du classificateur RandomForest: [[1635 1297] [520 3624]] precision recall f1-score support class 0 0.76 0.56 0.64 2932 class 1 0.74 …

9 classification random-forest precision-recall unbalanced-classes

4

Précision moyenne dans la détection d'objets

Je suis assez confus quant à la façon de calculer les valeurs AP ou mAP car il semble y avoir plusieurs méthodes différentes. Je veux spécifiquement obtenir les valeurs AP / mAP pour la détection d'objets. Tout ce que je sais, c'est: Rappel = TP / (TP + FN), précision …

8 machine-learning precision-recall model-evaluation average-precision object-detection

2

Calcul de la précision et du rappel dans R

Supposons que je construis un classificateur de régression logistique qui prédit si quelqu'un est marié ou célibataire. (1 = marié, 0 = célibataire) Je veux choisir un point sur la courbe précision-rappel qui me donne au moins 75% de précision, donc je veux choisir les seuils et , de sorte …

8 r precision-recall

2

Est-il judicieux de mesurer le rappel dans les systèmes de recommandation?

Supposons que j'ai construit un système de recommandation qui (étant donné, par exemple, le classement des films ou celui de nombreux utilisateurs) produira une liste de 10 films recommandés pour chaque utilisateur à regarder. Imaginez que j'ai également un grand nombre d'articles de film, ainsi qu'un journal des notes des …

8 precision-recall recommender-system

Questions marquées «precision-recall»