Statistiques et Big Data

1

Utilisation de la décomposition en valeurs singulières pour calculer la matrice de covariance de variance à partir d'un modèle de régression linéaire

J'ai une matrice de conception de p régresseurs, n observations, et j'essaie de calculer l'échantillon matrice de variance-covariance des paramètres. J'essaie de le calculer directement en utilisant svd. J'utilise R, quand je prends svd de la matrice de conception, j'obtiens trois composants: une matrice qui est , une matrice qui …

9 r regression

1

Quelle résolution temporelle pour le test de signification des séries chronologiques?

J'ai besoin de conseils sur le niveau de mise en commun approprié à utiliser pour les tests de différence de moyens sur les données de séries chronologiques. Je m'inquiète de la pseudo-réplication temporelle et sacrificielle, qui semble être en tension sur cette application. Cela fait référence à une étude mensurale …

9 time-series

2

Évaluer l'importance de la corrélation

J'ai deux variables, et je peux calculer par exemple la corrélation de Pearson entre elles, mais je voudrais savoir quelque chose d'analogue à ce que me donnerait un test t (c'est-à-dire une notion de l'importance de la corrélation). Une telle chose existe-t-elle?

9 correlation statistical-significance

2

Pondérer un système de notation pour privilégier les articles notés par plus de personnes par rapport aux articles notés par moins de personnes?

Merci d'avance de m'avoir accompagné, je ne suis aucun statisticien et je ne sais pas comment décrire ce que j'imagine, donc Google ne m'aide pas ici ... J'inclus un système de notation dans une application Web sur laquelle je travaille. Chaque utilisateur peut évaluer chaque élément exactement une fois. J'imaginais …

9 scales rating

1

Dois-je réorganiser mes données?

Nous avons un ensemble d'échantillons biologiques qui était assez cher à obtenir. Nous avons soumis ces échantillons à une série de tests pour générer des données qui sont utilisées pour construire un modèle prédictif. À cette fin, nous avons divisé les échantillons en ensembles d'apprentissage (70%) et d'essai (30%). Nous …

9 classification modeling experiment-design cross-validation bootstrap

1

Quelles sont les différences pratiques et d'interprétation entre les alternatives et la régression logistique?

Une question récente sur les alternatives à la régression logistique dans R a donné une variété de réponses, y compris randomForest, gbm, rpart, bayesglm et des modèles additifs généralisés. Quelles sont les différences pratiques et d'interprétation entre ces méthodes et la régression logistique? Quelles hypothèses font-ils (ou ne font-elles pas) …

9 r hypothesis-testing logistic random-forest

2

R: mettre à jour un graphique dynamiquement [fermé]

Fermé. Cette question est hors sujet . Il n'accepte pas actuellement les réponses. Vous souhaitez améliorer cette question? Mettez à jour la question afin qu'elle soit sur le sujet pour la validation croisée. Fermé il y a 8 mois . C'est une question de visualisation des données. J'ai une base …

9 r data-visualization

1

La régression du moindre angle maintient les corrélations monotones décroissantes et liées?

J'essaie de résoudre un problème de régression au moindre angle (LAR). Il s'agit d'un problème 3.23 à la page 97 de Hastie et al., Elements of Statistical Learning, 2nd. ed. (5ème impression) . Considérons un problème de régression avec toutes les variables et réponses ayant un zéro moyen et un …

9 regression machine-learning correlation self-study

2

Apprentissage incrémental pour le modèle de série chronologique LOESS

Je travaille actuellement sur certaines données de séries chronologiques, je sais que je peux utiliser le modèle LOESS / ARIMA. Les données sont écrites dans un vecteur dont la longueur est de 1000, qui est une file d'attente, mise à jour toutes les 15 minutes, Ainsi, les anciennes données apparaîtront …

9 time-series model-evaluation

1

Taille de l'échantillon pour les proportions dans les mesures répétées

J'essaie d'aider un scientifique à concevoir une étude sur la présence de microbes de salmonelles. Il aimerait comparer une formulation antimicrobienne expérimentale avec un chlore (eau de javel) dans les élevages de volailles. Étant donné que les taux de fond des salmonelles varient au fil du temps, il prévoit de …

9 sample-size repeated-measures proportion

2

Forcer un ensemble de nombres à une courbe en cloche gaussienne

( Cela concerne ma question de programmation sur Stack Overflow : Bell Curve Gaussian Algorithm (Python et / ou C #) .) Sur Answers.com, j'ai trouvé cet exemple simple: Trouver la moyenne arithmétique (moyenne) => Somme de toutes les valeurs de l'ensemble, divisée par le nombre d'éléments de l'ensemble Trouver …

9 algorithms normal-distribution

3

Comment rééchantillonner une série temporelle XTS dans R?

J'ai une XTSsérie chronologique irrégulièrement espacée (avec des POSIXctvaleurs comme type d'index). Comment puis-je créer une nouvelle série temporelle échantillonnée à un intervalle de 10 minutes, par exemple, mais avec chaque instant d'échantillonnage aligné sur une heure ronde (13:00:00, 13:10:00, 13:20:00, ...) . Si un moment de rééchantillonnage ne tombe …

9 r time-series sampling unevenly-spaced-time-series

4

Quelles sont les hypothèses pour appliquer un modèle de régression Tobit?

Ma connaissance (très basique) du modèle de régression Tobit ne vient pas d'une classe, comme je le préférerais. Au lieu de cela, j'ai récupéré des informations ici et là grâce à plusieurs recherches sur Internet. Ma meilleure estimation des hypothèses de régression tronquée est qu'elles sont très similaires aux hypothèses …

9 regression assumptions

2

Calculer la courbe ROC pour les données

Donc, j'ai 16 essais dans lesquels j'essaie d'authentifier une personne à partir d'un trait biométrique en utilisant Hamming Distance. Mon seuil est fixé à 3,5. Mes données sont ci-dessous et seul l'essai 1 est un vrai positif: Trial Hamming Distance 1 0.34 2 0.37 3 0.34 4 0.29 5 0.55 …

9 mathematical-statistics roc classification cross-validation pac-learning r anova survival hazard machine-learning data-mining hypothesis-testing regression random-variable non-independent normal-distribution approximation central-limit-theorem interpolation splines distributions kernel-smoothing r data-visualization ggplot2 distributions binomial random-variable poisson-distribution simulation kalman-filter regression lasso regularization lme4-nlme model-selection aic r mcmc dlm particle-filter r panel-data multilevel-analysis model-selection entropy graphical-model r distributions quantiles qq-plot svm matlab regression lasso regularization entropy inference r distributions dataset algorithms matrix-decomposition regression modeling interaction regularization expected-value exponential gamma-distribution mcmc gibbs probability self-study normality-assumption naive-bayes bayes-optimal-classifier standard-deviation classification optimization control-chart engineering-statistics regression lasso regularization regression references lasso regularization elastic-net r distributions aggregation clustering algorithms regression correlation modeling distributions time-series standard-deviation goodness-of-fit hypothesis-testing statistical-significance sample binary-data estimation random-variable interpolation distributions probability chi-squared predictor outliers regression modeling interaction

2

Échantillonnage à partir d'une distribution bivariée avec une densité connue en utilisant MCMC

J'ai essayé de simuler à partir d'une densité bivariée utilisant les algorithmes de Metropolis dans R et je n'ai pas eu de chance. La densité peut être exprimée comme , où est la distribution de Singh-Maddalap ( x , y)p(X,y)p(x,y)p ( y| x)p(x)p(y|X)p(X)p(y|x)p(x)p ( x )p(X)p(x) p ( x ) …

9 sampling monte-carlo metropolis-hastings