Statistiques et Big Data

4

Références pour consulter des statisticiens à proposer à leurs clients

Cette question illustre la difficulté d'une personne à maîtriser seule les statistiques et les probabilités, face à des ressources peu développées comme Wikipedia. Il m'est venu à l'esprit que la consultation de statisticiens, et il y en a quelques-uns ici, peut régulièrement relever le défi d'expliquer certains concepts et méthodes …

12 teaching references

4

Exemples de conséquences coûteuses d'une mauvaise utilisation des outils statistiques

Je soupçonne que la plupart des utilisateurs d'outils statistiques sont des utilisateurs auxiliaires (des gens qui ont peu ou pas de formation formelle en statistique). Il est très tentant pour les chercheurs et autres professionnels d'appliquer des méthodes statistiques à leurs données simplement parce qu'ils les ont vues «faites auparavant» …

12 dataset methodology

5

Puis-je utiliser PCA pour effectuer une sélection de variables pour l'analyse de cluster?

Je dois réduire le nombre de variables pour effectuer une analyse de cluster. Mes variables sont fortement corrélées, j'ai donc pensé faire une analyse factorielle PCA (analyse en composantes principales). Cependant, si j'utilise les scores obtenus, mes grappes ne sont pas tout à fait correctes (par rapport aux classifications précédentes …

12 clustering pca feature-selection factor-analysis

3

Lecture de seulement deux colonnes sur trois avec read.csv

Verrouillé . Cette question et ses réponses sont verrouillées car la question est hors sujet mais a une signification historique. Il n'accepte pas actuellement de nouvelles réponses ou interactions. J'ai un ensemble de données ascii qui se compose de trois colonnes, mais seules les deux dernières sont des données réelles. …

12 r

2

Différence entre le test t et l'ANOVA dans la régression linéaire

Je me demande quelles sont les différences entre le test t et l'ANOVA en régression linéaire? Est-ce qu'un test t pour tester si l'une des pentes et une intersection a une moyenne de zéro, alors que l'ANOVA pour tester si toutes les pentes ont une moyenne de zéro? Est-ce la …

12 regression anova t-test

4

Prévision de séries chronologiques binaires

J'ai une série temporelle binaire avec 1 lorsque la voiture ne bouge pas et 0 lorsque la voiture se déplace. Je veux faire une prévision pour un horizon temporel jusqu'à 36 heures à l'avance et pour chaque heure. Ma première approche a été d'utiliser un Naive Bayes en utilisant les …

12 r time-series forecasting binary-data

4

Estimateur d'une distribution binomiale

Comment définir un estimateur pour les données provenant d'une distribution binomiale? Pour bernoulli je peux penser à un estimateur estimant un paramètre p, mais pour le binôme je ne vois pas quels paramètres estimer quand on a n caractérisant la distribution? Mise à jour: Par estimateur, j'entends une fonction des …

12 estimation binomial

3

Estimation des probabilités de la chaîne de Markov

Quelle serait la manière courante d'estimer la matrice de transition MC compte tenu de la série temporelle? Existe-t-il une fonction R pour cela?

12 markov-process

2

Comment spécifier des contrastes spécifiques pour des mesures répétées ANOVA en voiture?

J'essaie d'exécuter une mesure répétée Anova dans R suivie de quelques contrastes spécifiques sur cet ensemble de données. Je pense que la bonne approche serait d'utiliser à Anova()partir du package de voiture. Permet d'illustrer ma question avec l'exemple tiré de l' ?Anovautilisation des OBrienKaiserdonnées (Remarque: j'ai omis le facteur de …

12 r anova repeated-measures contrasts sums-of-squares

2

Dessiner plusieurs diagrammes à barres sur un graphique en R [fermé]

Fermé. Cette question est hors sujet . Il n'accepte pas actuellement les réponses. Voulez-vous améliorer cette question? Mettez à jour la question afin qu'elle soit sur le sujet pour la validation croisée. Fermé il y a 4 ans . Je voudrais tracer quatre diagrammes à barres sur un seul graphique …

12 r data-visualization barplot

1

Calcul des intervalles de confiance via bootstrap sur des observations dépendantes

Le bootstrap, dans sa forme standard, peut être utilisé pour calculer les intervalles de confiance des statistiques estimées à condition que les observations soient iid. I. Visser et al. dans " Confidence Intervals for Hidden Markov Model Parameters ", a utilisé un bootstrap paramétrique pour calculer les IC des paramètres …

12 confidence-interval bootstrap hidden-markov-model

1

Définition des quantiles sur un échantillon pondéré

J'ai un échantillon pondéré, pour lequel je souhaite calculer des quantiles. 1 Idéalement, où les poids sont égaux (si = 1 ou autre), les résultats seraient conformes à celles de scipy.stats.scoreatpercentile()et R de quantile(...,type=7). Une approche simple serait de «multiplier» l'échantillon en utilisant les poids donnés. Cela donne effectivement un …

12 algorithms quantiles weighted-sampling

2

Que maximisent les premiers facteurs de l'analyse factorielle?

Dans l'analyse des composantes principales, les premières composantes principales sont les directions orthogonales avec la variance maximale. En d'autres termes, la première composante principale est choisie pour être la direction de la variance maximale, la deuxième composante principale est choisie pour être la direction orthogonale à la première avec la …

12 pca factor-analysis

9

Livre pour une vue d'ensemble large et conceptuelle des méthodes statistiques

Je suis très intéressé par le potentiel de l'analyse statistique pour la simulation / prévision / estimation de fonction, etc. Cependant, je n'en sais pas grand-chose et mes connaissances mathématiques sont encore assez limitées - je suis un étudiant de premier cycle en génie logiciel. Je cherche un livre qui …

12 r regression machine-learning references simulation

2

Nombre de paramètres dans le modèle de Markov

Je souhaite utiliser BIC pour la sélection de modèle HMM: BIC = -2*logLike + num_of_params * log(num_of_data) Alors, comment puis-je compter le nombre de paramètres dans le modèle HMM. Considérons un HMM simple à 2 états, où nous avons les données suivantes: data = [1 2 1 1 2 2 …

12 machine-learning model-comparison bic hidden-markov-model