Statistiques et Big Data

1

Quelles sont les conditions de régularité du test du rapport de vraisemblance

Quelqu'un pourrait-il me dire quelles sont les conditions de régularité pour la distribution asymptotique du test du rapport de vraisemblance? Partout où je regarde, il est écrit «sous les conditions de régularité» ou «sous les régularités probabilistes». Quelles sont exactement les conditions? Que les première et deuxième dérivées log-vraisemblance existent …

12 maximum-likelihood likelihood-ratio asymptotics

2

Est-il possible d'évaluer GLM en Python / scikit-learn en utilisant les distributions de Poisson, Gamma ou Tweedie comme famille pour la distribution d'erreur?

J'essaie d'apprendre un peu Python et Sklearn, mais pour mon travail, j'ai besoin d'exécuter des régressions qui utilisent des distributions d'erreur des familles Poisson, Gamma et surtout Tweedie. Je ne vois rien dans la documentation à leur sujet, mais ils se trouvent dans plusieurs parties de la distribution R, donc …

12 generalized-linear-model python scikit-learn gradient-descent tweedie-distribution

1

Qu'est-ce qui cause un motif en U dans le corrélogramme spatial?

J'ai remarqué dans mon propre travail ce modèle lors de l'examen d'un corrélogramme spatial à différentes distances, un modèle en forme de U dans les corrélations émerge. Plus précisément, de fortes corrélations positives à de faibles distances diminuent avec la distance, puis atteignent une fosse à un point particulier puis …

12 autocorrelation spatial

1

Comment former une courbe de précision-rappel lorsque je n'ai qu'une seule valeur pour PR?

J'ai une mission d'exploration de données où je crée un système de récupération d'images basé sur le contenu. J'ai 20 images de 5 animaux. Donc au total 100 images. Mon système renvoie les 10 images les plus pertinentes à une image d'entrée. Je dois maintenant évaluer les performances de mon …

12 data-mining matlab precision-recall curves computer-vision

2

Probit moindres carrés en deux étapes (2SLS)

On m'a dit qu'il était possible d'effectuer une régression IV en deux étapes où la première étape est un probit et la deuxième étape est une OLS. Est-il possible d'utiliser 2SLS si la première étape est un probit mais la deuxième étape est un modèle probit / poisson?

12 binary-data instrumental-variables probit 2sls

1

Tester un grand ensemble de données pour la normalité - comment et est-il fiable?

J'examine une partie de mon ensemble de données contenant 46840 valeurs doubles allant de 1 à 1690 regroupées en deux groupes. Afin d'analyser les différences entre ces groupes, j'ai commencé par examiner la distribution des valeurs afin de choisir le bon test. Après un guide sur les tests de normalité, …

12 r normal-distribution normality-assumption large-data

3

Élaboration d'un modèle de série chronologique approprié pour prédire les ventes en fonction de l'enregistrement du mois dernier

J'exploite une entreprise en ligne depuis deux ans de suite, j'ai donc mes données de ventes mensuelles depuis environ deux ans. Mon entreprise pour chaque mois est certainement affectée par le swing saisonnier (se comporte mieux à Noël, etc.), et probablement par d'autres facteurs que je ne connais pas. Afin …

12 time-series forecasting

3

Quelles sont les définitions des prieurs conjugués semi-conjugués et conditionnels?

Quelles sont les définitions des prieurs semi-conjugués et des prieurs conjugués conditionnels ? Je les ai trouvés dans l'analyse des données bayésiennes de Gelman , mais je n'ai pas pu trouver leurs définitions.

12 bayesian

2

Méthodes MCMC - brûler des échantillons?

Dans les méthodes MCMC , je continue à lire sur le burn-intemps ou le nombre d'échantillons à "burn". Qu'est-ce que c'est exactement et pourquoi est-ce nécessaire? Mise à jour: Une fois que MCMC se stabilise, reste-t-il stable? Comment la notion de burn-intemps est-elle liée à celle de mixage du temps?

12 sampling mcmc

4

Exécution de PCA avec seulement une matrice de distance

Je veux regrouper un ensemble de données massif pour lequel je n'ai que les distances par paire. J'ai implémenté un algorithme k-medoids, mais cela prend trop de temps à exécuter, donc je voudrais commencer par réduire la dimension de mon problème en appliquant PCA. Cependant, la seule façon que je …

12 pca dimensionality-reduction multidimensional-scaling

1

Comparaison des coefficients de régression d'un même modèle dans différents ensembles de données

J'évalue deux (2) réfrigérants (gaz) qui ont été utilisés dans le même système de réfrigération. J'ai des données de température d'aspiration saturée ( ), de température de condensation ( ) et d'ampérage ( ) pour l'évaluation. Il y a deux (2) ensembles de données; 1er réfrigérant ( ) et 2e …

12 regression regression-coefficients

1

Exemples intuitifs d'échantillonnage d'importance

Mon expérience est l'informatique. Je suis assez nouveau dans les méthodes d'échantillonnage de Monte Carlo et, bien que je comprenne les mathématiques, j'ai du mal à trouver des exemples intuitifs d'échantillonnage d'importance. Plus précisément, quelqu'un pourrait-il fournir des exemples de: une distribution originale dont on ne peut pas échantillonner mais …

12 probability distributions sampling importance-sampling

2

Meilleures pratiques pour créer des «données bien rangées»

Hadley Wickham a écrit un article stellaire intitulé "Tidy Data" ( lien ) dans JSS l'année dernière sur la manipulation des données et la mise en état "optimal" des données afin d'effectuer une analyse. Cependant, je me demandais quelles étaient les meilleures pratiques en termes de présentation de données tabulaires …

12 dataset tables

1

Test exact de Fisher et distribution hypergéométrique

Je voulais mieux comprendre le test exact du pêcheur, j'ai donc imaginé l'exemple de jouet suivant, où f et m correspond à l'homme et à la femme, et n et y correspond à la "consommation de soda" comme ceci: > soda_gender f m n 0 5 y 5 0 Évidemment, …

12 fishers-exact hypergeometric clustering supervised-learning modeling econometrics r regression residuals heteroscedasticity independence distributions self-study matlab libsvm self-study conditional-probability conditional-expectation hypothesis-testing self-study multiple-comparisons mode statistical-significance chi-squared multiple-comparisons maximum-likelihood poisson-process optimization uncertainty genetic-algorithms bayesian model-selection overfitting maximum-likelihood optimization approximation r prediction model-evaluation r machine-learning survival neural-networks cox-model machine-learning bayesian bayesian-network hierarchical-bayesian pooling

2

Pourquoi Thomas Bayes a-t-il trouvé le théorème de Bayes si difficile?

C'est plus une question d'histoire de la science, mais j'espère que c'est sur le sujet ici. J'ai lu que Thomas Bayes n'a réussi à découvrir le théorème de Bayes que pour le cas spécial d'un uniforme antérieur, et même alors, il a lutté avec, apparemment. Compte tenu de la banalité …

12 bayesian bayes history