Statistiques et Big Data

3

Différentes façons de produire un intervalle de confiance pour le rapport de cotes à partir de la régression logistique

J'étudie comment construire un intervalle de confiance à 95% pour l'odds ratio à partir des coefficients obtenus dans la régression logistique. Donc, compte tenu du modèle de régression logistique, log(p1−p)=α+βxlog⁡(p1−p)=α+βx \log\left(\frac{p}{1 - p}\right) = \alpha + \beta x \newcommand{\var}{\rm Var} \newcommand{\se}{\rm SE} tels que x=0x=0x = 0 pour le groupe …

12 logistic confidence-interval odds-ratio delta-method

3

Quel algorithme puis-je utiliser pour trouver des corrélations entre les événements?

Je suis nouveau dans l'apprentissage automatique, j'essaie donc de trouver de la littérature, mais je ne sais même pas pourquoi Google. Mes données sont de la forme suivante: User A performs Action P User B performs Action Q User C performs Action R ... User C performs Action X User …

12 machine-learning cross-correlation

5

L'apprentissage automatique est-il un rêve?

En découvrant l'apprentissage automatique, je vois différentes techniques intéressantes telles que: régler automatiquement les algorithmes avec des techniques telles que grid search, obtenir des résultats plus précis grâce à la combinaison de différents algorithmes du même "type", c'est-à-dire boosting, obtenir des résultats plus précis grâce à la combinaison de différents …

12 machine-learning algorithms boosting stacking automatic-algorithms

2

Le «théorème du déjeuner gratuit» s'applique-t-il aux tests statistiques généraux?

Une femme pour laquelle je travaillais m'a demandé de faire une ANOVA unidirectionnelle sur certaines données. J'ai répondu que les données étaient des données de mesures répétées (séries chronologiques) et que je pensais que l'hypothèse d'indépendance était violée. Elle a répondu que je ne devais pas m'inquiéter des hypothèses, juste …

12 assumptions

2

Justification du conjugué avant?

Outre l'utilisabilité, existe-t-il une justification épistémique (mathématique, philosophique, heuristique, etc.) pour utiliser des antérieurs conjugués? Ou est-ce juste que c'est généralement une approximation suffisamment bonne et rend les choses beaucoup plus faciles?

12 bayesian conjugate-prior philosophical

2

Comment transformer des valeurs négatives en logarithmes?

Je voudrais savoir comment transformer des valeurs négatives en Log(), car j'ai des données hétéroscédastiques. J'ai lu que cela fonctionne avec la formule Log(x+1)mais cela ne fonctionne pas avec ma base de données et je continue à obtenir des NaN en conséquence. Par exemple, je reçois ce message d'avertissement (je …

12 r logarithm

1

Pourquoi les gens n'utilisent-ils pas des RBF plus profonds ou des RBF en combinaison avec MLP?

Donc, en regardant les réseaux de neurones à fonction de base radiale, j'ai remarqué que les gens ne recommandent que l'utilisation d'une seule couche cachée, alors qu'avec les réseaux de neurones perceptron multicouches, plus de couches sont considérées comme meilleures. Étant donné que les réseaux RBF peuvent être entraînés avec …

12 machine-learning neural-networks rbf-network

2

Lancer une pièce est-il une manière équitable de randomiser un groupe en deux groupes?

Donc, mon oncle et moi-même nous disputons pour savoir si un tirage au sort est vraiment aléatoire. Je soutiens que ce n'est pas parce qu'en termes réels, un lanceur de pièces manipulera toujours une pièce, donc le résultat n'est pas 50/50, donc ce n'est pas un bon choix comme technique …

12 random-generation randomness random-allocation

1

Extraction automatique des mots clés: utilisation des similitudes cosinus comme fonctionnalités

J'ai une matrice de termes de document , et maintenant je voudrais extraire des mots-clés pour chaque document avec une méthode d'apprentissage supervisé (SVM, Naive Bayes, ...). Dans ce modèle, j'utilise déjà Tf-idf, Pos tag, ...MMM Mais maintenant, je me pose des questions sur les voisins. J'ai une matrice avec …

12 text-mining feature-construction supervised-learning cosine-distance cosine-similarity

1

Quand devrais-je m'inquiéter du paradoxe de Jeffreys-Lindley dans le choix du modèle bayésien?

Je considère un grand (mais fini) espace de modèles de complexité variable que j'explore en utilisant RJMCMC . Le prior sur le vecteur de paramètre pour chaque modèle est assez informatif. Dans quels cas (le cas échéant) devrais-je m'inquiéter du paradoxe de Jeffreys-Lindley favorisant les modèles plus simples alors que …

12 bayesian model-selection mcmc prior improper-prior

1

Comment interpréter la hauteur du tracé de densité

Comment dois-je interpréter la hauteur des tracés de densité: Par exemple, dans le graphique ci-dessus, le pic est d'environ 0,07 à x = 18. Puis-je en déduire qu'environ 7% des valeurs sont d'environ 18? Puis-je être plus précis que ça? Il y a aussi un deuxième pic à x = …

12 data-visualization pdf

2

Pourquoi le n-gramme est-il utilisé dans l'identification de la langue du texte au lieu des mots?

Dans deux bibliothèques d'identification de langue populaires, Compact Language Detector 2 pour C ++ et détecteur de langue pour java, les deux utilisaient des n-grammes (basés sur des caractères) pour extraire des fonctionnalités de texte. Pourquoi un sac de mots (un seul mot / dictionnaire) n'est-il pas utilisé, et quels …

12 machine-learning classification text-mining natural-language

3

Concernant la convergence des probabilités

Soit une suite de variables aléatoires st en probabilité, où est une constante fixe. J'essaie de montrer ce qui suit: et tous deux en probabilité. Je suis ici pour voir si ma logique était bonne. Voici mon travail{Xn}n≥1{Xn}n≥1\{X_n\}_{n\geq 1}Xn→aXn→aX_n \to aa>0a>0a>0Xn−−−√→a−−√Xn→a\sqrt{X_n} \to \sqrt{a}aXn→1aXn→1\frac{a}{X_n}\to 1 TENTATIVE Pour la première partie, nous …

12 random-variable convergence asymptotics probability-inequalities coverage-probability

1

Distribution approximative du produit de N iid normal? Cas particulier μ≈0

Étant donné iid X n ≈ N ( μ X , σ 2 X ) et μ X ≈ 0 , recherchant:N≥ 30N≥30N\geq30Xn≈ N( μX, σ2X)Xn≈N(μX,σX2)X_n\approx\mathcal{N}(\mu_X,\sigma_X^2)μX≈ 0μX≈0\mu_X \approx 0 approximation précise de la distribution sous forme fermée de OuiN= ∏1NXnYN=∏1NXnY_N=\prod\limits_{1}^{N}{X_n} approximation asymptotique ( exponentielle ?) du même produit Il s'agit …

12 distributions normal-distribution asymptotics approximation

1

Quel est le nom de la méthode d'estimation de la densité où toutes les paires possibles sont utilisées pour créer une distribution de mélange normale?

Je viens de penser à une façon soignée (pas nécessairement bonne) de créer des estimations de densité unidimensionnelles et ma question est: Cette méthode d'estimation de la densité a-t-elle un nom? Sinon, s'agit-il d'un cas particulier d'une autre méthode dans la littérature? Voici la méthode: Nous avons un vecteur que …

12 r estimation nonparametric pdf kernel-smoothing