Statistiques et Big Data

4

Un classificateur bayésien est-il une bonne approche pour le texte avec des métadonnées numériques?

J'essaie de trouver une approche pour détecter les publicités frauduleuses sur mon site Web. Je pense que le problème a beaucoup en commun avec la détection des e-mails de spam (pour lesquels un classificateur bayésien naïf est une solution courante) car de nombreux signaux indiquant une arnaque seront trouvés dans …

8 bayesian classification naive-bayes

3

Comment évaluer les résultats de la régression linéaire

J'ai un problème de régression linéaire. En bref, j'ai un ensemble de données, je l'ai divisé en deux sous-ensembles. Un sous-ensemble est utilisé pour trouver la régression linéaire (sous-ensemble d'apprentissage), un autre est utilisé pour l'évaluer (sous-ensemble d'évaluation). Ma question est de savoir comment évaluer le résultat de cette régression …

8 regression linear-model

1

MCMC et augmentation des données

J'ai regardé une question d'augmentation de données MCMC; la forme générale de la question est la suivante: Supposons que les données recueillies sur un processus suggèrent et qu'un a priori pour le paramètre de débit soit suggéré comme . Les données sont enregistrées et présentées sous une forme typique (c'est-à-dire …

8 self-study mcmc monte-carlo data-augmentation

1

Pourquoi y a-t-il autant de générateurs aléatoires dans R?

Un rapide coup d' oeil à la page d'aide du générateur de nombres aléatoires de R montre que vous pouvez choisir parmi 7 générateurs prédéfinis ( Wichmann-Hill, Marsaglia-Multicarry, Super-Duper, Mersenne-Twister, Knuth-TAOCP-2002, Knuth-TAOCP, L'Ecuyer-CMRG). ?Random La valeur par défaut est Mersenne-Twister , qui semble très bonne. Alors pourquoi auriez-vous besoin d'en …

8 r random-generation

1

L'erreur de classification est plus faible lorsque je ne fais aucun apprentissage sur l'ensemble de données?

J'ai un ensemble de données d'un sac de mots. Je choisis au hasard certains points et les utilise pour les tests et les autres sont utilisés pour la formation. cas (1) Je prends simplement chaque point de données de l'ensemble de test et le classe comme ayant la même étiquette …

8 machine-learning classification

2

Expliquer le graphique de densité du noyau

J'exécute la simulation sur un modèle linéaire. J'obtiens 1000 résultats et les résultats sont mis dans un graphique de densité. Je comprends que le xaxis est la variable dépendante et que les yaxis représentent la densité du noyau. Yaxis est en nombres décimaux comme de 0 à 0,15. Comment expliquer …

8 distributions pdf kernel-smoothing

1

Quel niveau utiliser pour comparer des sujets dans une analyse bayésienne hiérarchique?

Disons que j'ai une expérience où je teste le temps de réaction d'un certain nombre de sujets où chaque sujet fait de nombreux essais de temps de réaction. Dans un cadre bayésien, les temps de réaction (yyy) pourrait être modélisé par un modèle hiérarchique avec une distribution préalable à la …

8 bayesian jags psychology hierarchical-bayesian

1

Régression contrainte dans R: coefficients positifs, somme à 1 et interception non nulle

J'ai le modèle que j'ai besoin d'estimer, avec et \ pi_k \ ge0 \ text {for} k \ geq 1 .Y=π0+π1X1+π2X2+π3X3+ε,Y=π0+π1X1+π2X2+π3X3+ε, Y = \pi_0 + \pi_1 X_1 + \pi_2 X_2 + \pi_3 X_3 + \varepsilon, ∑kπk=1 for k≥1∑kπk=1 for k≥1\sum_k \pi_k = 1 \text{ for }k \geq 1πk≥0 for k≥1πk≥0 …

8 r regression econometrics least-squares constrained-regression

4

Choisir entre la régression logistique et les tests Mann Whitney / t

J'ai une variable dichotomique , qui n'a pas de proportion a priori déterminée de 0 et de 1, et une variable continue .UNEAAbbb Dans le scénario 1, je décide de désigner comme variable indépendante X et b comme variable dépendante y . Je teste ensuite X contre y en utilisant …

8 logistic t-test wilcoxon-mann-whitney

2

Non paramétrique pour ANOVA bidirectionnelle (3x3)

Ma variable dépendante est continue, non normale (asymétrique à gauche selon le test de Shapiro-Wilk). J'ai deux variables indépendantes (groupe de traitement par couleur, type d'aliment). Il y a 3 niveaux dans chaque variable indépendante. Le nombre d'observations pour chaque variable indépendante n'est pas égal. J'ai recherché des tests non …

8 anova nonparametric sas

1

Par où commencer: séries chronologiques inégalement espacées, avec beaucoup de valeurs aberrantes ou aléatoires

Je ne sais pas vraiment ce qui est possible et je voudrais un pointeur dans la bonne direction. J'ai des mesures de temps et de position qui pourraient être n'importe quoi d'une personne marchant, un véhicule sur une route, ou dans un parking, ou une imprimante dans un bureau. Je …

8 time-series kalman-filter unevenly-spaced-time-series

6

L'utilisation des mêmes données pour la sélection d'entités et la validation croisée est-elle biaisée ou non?

Nous avons un petit ensemble de données (environ 250 échantillons * 100 entités) sur lequel nous voulons construire un classificateur binaire après avoir sélectionné le meilleur sous-ensemble d'entités. Disons que nous partitionnons les données en: Formation, validation et tests Pour la sélection des fonctionnalités, nous appliquons un modèle de wrapper …

8 machine-learning cross-validation feature-selection train

1

Covariance d'une variable et d'une combinaison linéaire d'autres variables

Soit variables de séries temporelles et la covariance entre deux paires quelconques de celles-ci est connue.X,A,B,C,DX,A,B,C,DX,A,B,C,D Supposons que nous voulons trouver , où a, b, c, d sont des constantes.cov(X,aA+bB+cC+dD)cov(X,aA+bB+cC+dD)\textrm{cov}(X,aA + bB + cC + dD)a,b,c,da,b,c,da,b,c,d Existe-t-il un moyen de le faire sans développer E[(X−E[X])(aA+......)]E[(X−E[X])(aA+......)]E[(X-E[X])(aA+......)] ?

8 correlation variance covariance

4

Puis-je prouver une relation curviligne lorsque la variable indépendante linéaire n'est pas significative

J'étudie un effet curviligne entre X et Y en utilisant une analyse de régression hiérarchique. Pour tester les effets curvilignes, le terme au carré pour X a été calculé (je veux dire le centre aussi la variable X). Dans le modèle 1, les variables de contrôle ont été saisies. Dans …

8 regression

1

Problème d'identification des paramètres

J'ai toujours du mal à obtenir la véritable essence de l'identification en économétrie. Je sais que nous déclarons qu'un paramètre (par exemple ) peut être identifié si, simplement en regardant sa distribution (conjointe), nous pouvons déduire la valeur du paramètre. Dans un cas simple de y = b_1X + u …

8 estimation identifiability