Statistiques et Big Data correlation

3

Générer des paires de nombres aléatoires uniformément distribués et corrélés

Je voudrais générer des paires de nombres aléatoires avec une certaine corrélation. Cependant, l'approche habituelle consistant à utiliser une combinaison linéaire de deux variables normales n'est pas valable ici, car une combinaison linéaire de variables uniformes n'est plus une variable uniformément distribuée. J'ai besoin que les deux variables soient uniformes. …

14 correlation random-generation uniform

5

Existe-t-il un moyen simple de détecter les valeurs aberrantes?

Je me demande s'il existe un moyen simple de détecter les valeurs aberrantes. Pour l'un de mes projets, qui était essentiellement une corrélation entre le nombre de fois que les répondants participent à une activité physique en une semaine et le nombre de fois qu'ils mangent à l'extérieur de la …

14 correlation outliers

3

Est-il sensé qu'une corrélation partielle soit plus grande qu'une corrélation d'ordre zéro?

Cela démontre probablement un manque fondamental de compréhension du fonctionnement des corrélations partielles. J'ai 3 variables, x, y, z. Lorsque je contrôle pour z, la corrélation entre x et y augmente par rapport à la corrélation entre x et y lorsque z n'a pas été contrôlé. Est-ce que ça a …

14 correlation

2

Calcul de la corrélation (et de l'importance de ladite corrélation) entre une paire de séries chronologiques

J'ai deux séries temporelles S et T. elles ont la même fréquence et la même longueur. Je voudrais calculer (en utilisant R), la corrélation entre cette paire (c'est-à-dire S et T), et être également capable de calculer la signification de la corrélation), afin que je puisse déterminer si la corrélation …

14 r time-series correlation

1

GAM vs LOESS vs splines

Contexte : Je veux tracer une ligne dans un nuage de points qui n'apparaît pas paramétrique, donc j'utilise geom_smooth()in ggplotin R. Il retourne automatiquement geom_smooth: method="auto" and size of largest group is >=1000, so using gam with formula: y ~ s(x, bs = "cs"). Use 'method = x' to change …

14 r gam splines loess r data-visualization boxplot mathematical-statistics theory sufficient-statistics machine-learning classification correlation svm feature-selection probability stochastic-processes machine-learning reinforcement-learning

1

Existe-t-il une caractérisation intuitive de la corrélation de distance?

J'ai regardé la page wikipedia pour la corrélation de distance où elle semble être caractérisée par la façon dont elle peut être calculée. Bien que je puisse faire les calculs, j'ai du mal à obtenir quelles mesures de corrélation de distance et pourquoi les calculs se présentent comme ils le …

14 correlation distance intuition distance-covariance

4

Comment la somme de deux variables peut-elle expliquer plus de variance que les variables individuelles?

J'obtiens des résultats déroutants pour la corrélation d'une somme avec une troisième variable lorsque les deux prédicteurs sont corrélés négativement. Qu'est-ce qui cause ces résultats déroutants? Exemple 1: corrélation entre la somme de deux variables et une troisième variable Considérons la formule 16.23 à la page 427 du texte de …

13 correlation multiple-regression

2

Les données d'entrée corrélées entraînent-elles un sur-ajustement avec les réseaux de neurones?

À mon avis, les données d'entrée corrélées doivent conduire à un sur-ajustement dans les réseaux de neurones car le réseau apprend la corrélation, par exemple le bruit dans les données. Est-ce correct?

13 correlation neural-networks overfitting

3

Quand la transformation z de Fisher est-elle appropriée?

Je veux tester la corrélation d'un échantillon pour la signification, en utilisant des valeurs de p, c'est-à-direrrr H0:ρ=0,H1:ρ≠0.H0:ρ=0,H1:ρ≠0.H_0: \rho = 0, \; H_1: \rho \neq 0. J'ai compris que je peux utiliser la transformée en z de Fisher pour calculer cela en zobs=n−3−−−−−√2ln(1+r1−r)zobs=n−32ln⁡(1+r1−r)z_{obs}= \displaystyle\frac{\sqrt{n-3}}{2}\ln\left(\displaystyle\frac{1+r}{1-r}\right) et trouver la valeur de p …

13 correlation sample-size fisher-transform

4

Comment calculer la corrélation entre / au sein de groupes de variables?

J'ai une matrice de 1000 observations et 50 variables mesurées chacune sur une échelle de 5 points. Ces variables sont organisées en groupes, mais il n'y a pas un nombre égal de variables dans chaque groupe. Je voudrais calculer deux types de corrélations: Corrélation au sein des groupes de variables …

13 correlation psychometrics scales

1

LARS vs descente coordonnée pour le lasso

Quels sont les avantages et les inconvénients de l'utilisation de LARS [1] par rapport à l'utilisation de la descente de coordonnées pour ajuster la régression linéaire régularisée L1? Je m'intéresse principalement aux aspects de performance (mes problèmes ont tendance à avoir Ndes centaines de milliers et p<20). Cependant, toute autre …

13 regression lasso regularization regression references lasso regularization elastic-net r distributions aggregation clustering algorithms regression correlation modeling distributions time-series standard-deviation goodness-of-fit hypothesis-testing statistical-significance sample binary-data estimation random-variable interpolation distributions probability chi-squared predictor outliers regression modeling interaction

1

Package GBM vs Caret utilisant GBM

J'ai ajusté le modèle à l'aide caret, mais j'ai ensuite réexécuté le modèle à l'aide du gbmpackage. Je crois comprendre que le caretpackage utilise gbmet que la sortie doit être la même. Cependant, un simple test rapide utilisant data(iris)montre une différence dans le modèle d'environ 5% en utilisant RMSE et …

13 r caret gbm matrix linear-algebra logistic modeling logit ordered-logit r confidence-interval survival population weibull classification separation hypothesis-testing correlation statistical-significance p-value python r data-visualization r regression multiple-regression chi-squared multivariate-analysis distributions random-variable experiment-design distributions poisson-regression residuals excel time-series garch var survival modeling cox-model interaction r pca normality-assumption

4

L'inégalité triangulaire est-elle satisfaite pour ces distances basées sur la corrélation?

Pour le clustering hiérarchique, je vois souvent les deux "métriques" suivantes (elles ne parlent pas exactement) pour mesurer la distance entre deux variables aléatoires et Y : XXXOuiYY\newcommand{\Cor}{\mathrm{Cor}} L'un ou l'autre remplit-il l'inégalité du triangle? Si oui, comment dois-je le prouver autrement que simplement faire un calcul de force brute? …

13 correlation clustering distance metric

1

Utilisation d'informations mutuelles pour estimer la corrélation entre une variable continue et une variable catégorielle

Quant au titre, l'idée est d'utiliser des informations mutuelles, ici et après MI, pour estimer la "corrélation" (définie comme "tout ce que je sais sur A quand je connais B") entre une variable continue et une variable catégorielle. Je vais vous dire mes réflexions sur la question dans un instant, …

13 correlation information-theory mutual-information

2

Relation entre les coefficients de corrélation phi, Matthews et Pearson

Les coefficients de corrélation phi et Matthews sont-ils le même concept? Comment sont-ils liés ou équivalents au coefficient de corrélation de Pearson pour deux variables binaires? Je suppose que les valeurs binaires sont 0 et 1. La corrélation de Pearson entre deux variables aléatoires de Bernoulli et est:yxxxyyy ρ=E[(x−E[x])(y−E[y])]Var[x]Var[y]−−−−−−−−−−√=E[xy]−E[x]E[y]Var[x]Var[y]−−−−−−−−−−√=n11n−n1∙n∙1n0∙n1∙n∙0n∙1−−−−−−−−−−√ρ=E[(x−E[x])(y−E[y])]Var[x]Var[y]=E[xy]−E[x]E[y]Var[x]Var[y]=n11n−n1∙n∙1n0∙n1∙n∙0n∙1 \rho …

13 correlation contingency-tables bernoulli-distribution model-evaluation confusion-matrix

Questions marquées «correlation»