Statistiques et Big Data intuition

9

Y a-t-il une explication intuitive à la multicolinéarité qui pose problème en régression linéaire?

Le wiki aborde les problèmes qui se posent lorsque la multicollinéarité est un problème en régression linéaire. Le problème fondamental est que la multicolinéarité aboutit à des estimations de paramètres instables, ce qui rend très difficile l'évaluation de l'effet des variables indépendantes sur les variables dépendantes. Je comprends les raisons …

85 regression intuition multicollinearity

8

La ligne de meilleur ajustement ne ressemble pas à un bon ajustement. Pourquoi?

Regardez ce graphique Excel: La ligne du meilleur ajustement du «bon sens» apparaîtrait comme une ligne presque verticale au centre des points (modifiée à la main en rouge). Cependant, la ligne de tendance linéaire décidée par Excel est la ligne noire diagonale indiquée. Pourquoi Excel a-t-il produit quelque chose qui …

82 regression excel intuition

10

Comprendre intuitivement la «variance»

Quel est le moyen le plus simple et le plus simple d’expliquer le concept de variance à une personne? Qu'est-ce que cela signifie intuitivement? Si on doit expliquer cela à leur enfant, comment s'y prendrait-on? C’est un concept que j’ai du mal à articuler - en particulier lorsque l’on fait …

81 distributions variance standard-deviation inference intuition

13

Quel est le rôle du logarithme dans l'entropie de Shannon?

L'entropie de Shannon est le négatif de la somme des probabilités de chaque résultat multiplié par le logarithme des probabilités de chaque résultat. A quoi sert le logarithme dans cette équation? Une réponse intuitive ou visuelle (par opposition à une réponse profondément mathématique) recevra des points bonus!

72 entropy intuition sequence-analysis

8

Qu'entend-on par «variable aléatoire»?

Que veulent-ils dire quand ils parlent de "variable aléatoire"?

69 mathematical-statistics random-variable intuition definition

4

Quel est le "moment" des "moments" d'une distribution de probabilité?

Je sais ce que sont les moments, comment les calculer et comment utiliser la fonction de génération de moments pour obtenir des moments d'ordre supérieur. Oui, je connais les maths. Maintenant que j'ai besoin de connaître mes statistiques pour pouvoir travailler, je me suis dit que je pourrais aussi bien …

65 distributions terminology moments intuition

18

Questions d'entrevue statistique

Je suis à la recherche de statistiques (et de probabilités, je suppose) pour les questions d’entrevue, des plus élémentaires aux plus avancées. Les réponses ne sont pas nécessaires (bien que des liens vers des questions spécifiques sur ce site feraient bien).

65 intuition careers

4

Explication intuitive de Fisher Information et Cramer-Rao liés

Je ne suis pas à l'aise avec les informations de Fisher, ce qu'elles mesurent et en quoi elles sont utiles. De plus, sa relation avec la borne Cramer-Rao ne m'est pas apparente. Quelqu'un peut-il s'il vous plaît donner une explication intuitive de ces concepts?

59 estimation intuition fisher-information

13

Est-ce que 10 têtes d'affilée augmentent les chances que le prochain lancer soit une queue?

Je suppose que ce qui suit est vrai: supposer une pièce équitable, avoir 10 têtes de suite tout en lançant une pièce n'augmente pas les chances que le prochain tirage soit une queue , quelle que soit la quantité de probabilité et / ou le jargon statistique utilisé. (excusez les …

57 probability independence intuition games bernoulli-process

2

Pourquoi le retrait fonctionne-t-il?

Afin de résoudre les problèmes de sélection de modèle, un certain nombre de méthodes (LASSO, régression de crête, etc.) réduiront les coefficients des variables prédictives vers zéro. Je cherche une explication intuitive de la raison pour laquelle cela améliore la capacité de prédiction. Si le véritable effet de la variable …

55 lasso regularization ridge-regression intuition shrinkage

5

Quelle est l'explication intuitive de la façon dont l'ACP passe d'un problème géométrique (avec des distances) à un problème d'algèbre linéaire (avec des vecteurs propres)?

J'ai beaucoup lu sur la PCA, y compris divers tutoriels et questions (comme celle-ci , celle-ci , celle-ci et celle-ci ). Le problème géométrique que PCA essaie d’optimiser m’est clair: PCA essaie de trouver le premier composant principal en minimisant l’erreur de reconstruction (projection), ce qui maximise simultanément la variance …

54 pca optimization linear-algebra intuition

3

Quelle est l'intuition derrière SVD?

J'ai lu sur la décomposition en valeurs singulières (SVD). Dans presque tous les manuels, il est mentionné que la matrice est divisée en trois matrices avec une spécification donnée. Mais quelle est l'intuition derrière la division de la matrice sous une telle forme? La PCA et d’autres algorithmes de réduction …

50 matrix linear-algebra svd intuition

4

Pourquoi le coefficient de corrélation entre les variables aléatoires X et XY a-t-il tendance à être de 0,7?

Tiré de Statistiques pratiques pour la recherche médicale où Douglas Altman écrit à la page 285: ... pour deux quantités quelconques X et Y, X sera corrélé à XY. En effet, même si X et Y sont des échantillons de nombres aléatoires, on s’attendrait à ce que la corrélation de …

49 correlation random-variable intuition

6

Que sont les variables aléatoires?

Comment expliqueriez-vous iid (indépendant et identiquement distribué) à des personnes non techniques?

49 random-variable intuition

5

Intuition sur la divergence de Kullback-Leibler (KL)

J'ai appris sur l'intuition qui se cache derrière la divergence KL, en quoi une fonction de distribution de modèle diffère de la distribution théorique / vraie des données. La source que je lis poursuit en disant que la compréhension intuitive de la « distance » entre ces deux distributions est …

48 distributions distance intuition kullback-leibler

Questions marquées «intuition»