Statistiques et Big Data

27

La situation Certains chercheurs aimeraient vous endormir. En fonction du tirage au sort secret d'une pièce de monnaie, ils vous éveilleront brièvement une fois (têtes) ou deux fois (queues). Après chaque réveil, ils vous rendront dormir avec un médicament qui vous fera oublier cet éveil. Quand vous serez réveillé, dans …

133 decision-theory paradox

8

Pourquoi la méthode de Newton n'est-elle pas largement utilisée dans l'apprentissage automatique?

C'est quelque chose qui me dérange depuis un moment et je ne trouvais pas de réponses satisfaisantes en ligne, alors voici: Après avoir passé en revue un ensemble de conférences sur l'optimisation convexe, la méthode de Newton semble être un algorithme bien supérieur à la descente de gradient pour trouver …

132 machine-learning optimization gradient-descent hessian

4

Kappa de Cohen en anglais clair

Je lis un livre de data mining qui mentionnait la statistique Kappa comme moyen d’évaluer les performances de prévision des classificateurs. Cependant, je ne peux tout simplement pas comprendre cela. J'ai aussi vérifié Wikipedia mais cela n'a pas aidé aussi: https://en.wikipedia.org/wiki/Cohen's_kappa . Comment le kappa de Cohen aide-t-il à évaluer …

131 classification data-mining cohens-kappa

14

Les grands ensembles de données sont-ils inappropriés pour les tests d'hypothèses?

Dans un article récent d' Amstat News , les auteurs (Mark van der Laan et Sherri Rose) ont déclaré: "Nous savons que pour des échantillons suffisamment grands, toute étude - y compris celles dans lesquelles l'hypothèse nulle de non-effet est vraie - déclarera une effet statistiquement significatif ". Eh bien, …

129 hypothesis-testing sample-size dataset large-data

6

Quelle est la différence entre la variance et l'écart type?

Je me demandais quelle est la différence entre la variance et l'écart type. Si vous calculez les deux valeurs, il est clair que vous obtenez l'écart type de la variance, mais qu'est-ce que cela signifie en termes de distribution que vous observez? De plus, pourquoi avez-vous vraiment besoin d'un écart-type?

127 variance mathematical-statistics standard-deviation

9

Explication de bas en haut de la distance de Mahalanobis?

J'étudie la reconnaissance des formes et les statistiques et presque tous les livres que j'ouvre sur le sujet me heurtent au concept de distance de Mahalanobis . Les livres donnent en quelque sorte des explications intuitives, mais elles ne sont toujours pas suffisantes pour que je puisse réellement comprendre ce …

127 normal-distribution mathematical-statistics distance pattern-recognition intuition

9

Obtenir des connaissances à partir d'une forêt aléatoire

Les forêts aléatoires sont considérées comme des boîtes noires, mais récemment, je pensais quelles connaissances peuvent être obtenues à partir d'une forêt aléatoire. La chose la plus évidente est l’importance des variables, dans la variante la plus simple, il suffit de calculer le nombre d’occurrences d’une variable. La deuxième chose …

127 machine-learning data-mining interaction random-forest cart

3

Quelle est la différence entre un estimateur cohérent et un estimateur non biaisé?

Je suis vraiment surpris que personne ne semble l'avoir déjà demandé ... Lors de la discussion sur les estimateurs, deux termes fréquemment utilisés sont "cohérent" et "non biaisé". Ma question est simple: quelle est la différence? Les définitions techniques précises de ces termes sont assez compliquées et il est difficile …

125 unbiased-estimator estimators consistency

3

Aidez-moi à comprendre les distributions bayésiennes antérieures et postérieures

Dans un groupe d’étudiants, 2 sur 18 sont gauchers. Trouver la distribution postérieure des étudiants gauchers dans la population en supposant que les informations ne sont pas antérieures. Résumez les résultats. Selon la littérature, 5 à 20% des gens sont gauchers. Tenez compte de ces informations dans votre précédent et …

125 distributions bayesian prior posterior

6

Corrélations avec des variables qualitatives non ordonnées

J'ai une base de données avec de nombreuses observations et de nombreuses variables. Certains sont catégoriques (non ordonnés) et les autres sont numériques. Je cherche des associations entre ces variables. J'ai pu calculer la corrélation pour les variables numériques (corrélation de Spearman) mais: Je ne sais pas comment mesurer la …

123 r correlation categorical-data continuous-data mixed-type-data

4

Quelle est la différence entre les réseaux de neurones convolutionnels, les machines Boltzmann restreintes et les auto-encodeurs?

Récemment, j'ai lu sur l'apprentissage en profondeur et je suis confus sur les termes (ou dire technologies). Quelle est la différence entre Réseaux de neurones convolutifs (CNN), Machines Boltzmann restreintes (RBM) et Auto-encodeurs?

123 neural-networks deep-learning conv-neural-network autoencoders rbm

3

Quelle est la différence entre la régression linéaire et la régression logistique?

Quelle est la différence entre la régression linéaire et la régression logistique? Quand utiliseriez-vous chacun?

122 regression logistic linear-model

3

Pourquoi avons-nous besoin de sigma-algèbres pour définir des espaces de probabilité?

Nous avons une expérience aléatoire avec différents résultats formant l’ espace échantillon Ω ,Ω,\Omega, sur lesquels nous examinons avec intérêt certains modèles appelés événements Les sigma-algèbres (ou sigma-champs) sont constitués d'événements auxquels une mesure de probabilité peut être affectée. Certaines propriétés sont remplies, notamment l'inclusion de l'ensemble null et de …

122 probability intuition measure-theory sigma-algebra

21

À chaque étape d'un processus infini limitant, mettez 10 boules dans une urne et retirez-en une au hasard. Combien de balles reste-t-il?

La question (légèrement modifiée) va comme suit et si vous ne l’avez jamais rencontrée auparavant, vérifiez-la dans l’exemple 6a, chapitre 2, de A premier cours de probabilité de Sheldon Ross : Supposons que nous possédions une urne infiniment grande et une collection infinie de balles portant le numéro 1, le …

121 probability paradox

5

Comment choisir entre la corrélation de Pearson et Spearman?

Comment puis-je savoir quand choisir entre Spearman et de Pearson ? Ma variable inclut la satisfaction et les scores ont été interprétés en utilisant la somme des scores. Cependant, ces scores pourraient également être classés.ρρ\rhorrr

119 correlation pearson-r spearman-rho