Statistiques et Big Data

2

Régression logistique multinomiale vs régression logistique binaire one-vs-rest

Disons que nous avons une variable dépendante avec peu de catégories et un ensemble de variables indépendantes. YYY Quels sont les avantages de la régression logistique multinomiale par rapport à un ensemble de régressions logistiques binaires (c. -à-d. Un schéma un-vs-reste )? Par ensemble de régression logistique binaire, je veux …

36 logistic categorical-data multinomial

3

Points à considérer sur les programmes de maîtrise en statistiques

C'est la saison d'admission pour les écoles supérieures. Je (et de nombreux étudiants comme moi) essaie maintenant de choisir le programme de statistiques à choisir. Quelles sont les choses que ceux d’entre vous qui travaillent avec les statistiques suggèrent que nous considérions les programmes de maîtrise en statistiques? Existe-t-il des …

36 machine-learning mathematical-statistics careers

4

Bonnes méthodes pour les diagrammes de densité de variables non négatives dans R?

plot(density(rexp(100)) De toute évidence, toute densité à gauche de zéro représente un biais. Je cherche à résumer certaines données relatives aux non-statisticiens et à éviter de se demander pourquoi les données non négatives ont une densité inférieure à zéro. Les parcelles sont destinées à la vérification de la randomisation; Je …

36 r pdf gamma-distribution kernel-smoothing

3

Interprétation de la valeur p dans le test d'hypothèse

Je suis récemment tombé sur le document "L'essai de signification de l'hypothèse nulle", Jeff Gill (1999) . L'auteur a soulevé quelques idées fausses sur les tests d'hypothèses et les valeurs p, au sujet desquelles j'ai deux questions spécifiques: La valeur p est techniquement , ce qui, comme le souligne le …

36 hypothesis-testing p-value

6

Pourquoi «expliquer» a-t-il un sens intuitif?

J'ai récemment appris l'existence d'un principe de raisonnement probabiliste appelé " expliquer ", et j'essaie d'en saisir l'intuition. Permettez-moi de mettre en place un scénario. Soit AAA l’événement d’un séisme. Que l’événement BBB soit l’événement où le joyeux géant vert se promène en ville. Soit CCC l’événement où le sol …

36 probability intuition

3

Comment estimer le paramètre de retrait dans la régression de Lasso ou de crête avec des variables> 50K?

Je souhaite utiliser la régression de Lasso ou de crête pour un modèle comportant plus de 50 000 variables. Je souhaite utiliser un logiciel en mode R. Comment puis-je estimer le paramètre de retrait ( λλ\lambda )? Modifications: Voici le point je me suis levé à: set.seed (123) Y <- …

36 r lasso ridge-regression high-dimensional

4

D'où vient dans le théorème de la limite centrale (CLT)?

Une version très simple du théorème central limité comme ci-dessous qui est Lindeberg – Lévy CLT. Je ne comprends pas pourquoi il y a un sur le côté gauche. Et Lyapunov CLT dit mais pourquoi pas ? Quelqu'un pourrait-il me dire quels sont ces facteurs, tels que \ sqrt {n} …

36 central-limit-theorem intuition

5

Mesure de levage dans l'exploration de données

J'ai cherché de nombreux sites Web pour savoir ce que ferait exactement l'ascenseur? Les résultats que j'ai trouvés concernaient tous son utilisation dans des applications autres que celles-ci. Je connais la fonction de support et de confiance. D'après Wikipédia, dans l'exploration de données, l'ascenseur est une mesure de la performance …

36 data-mining

4

Comment puis-je ajuster une régression contrainte dans R afin que les coefficients totaux = 1?

Je vois une régression similaire similaire ici: Régression linéaire contrainte à travers un point spécifié mais mon exigence est légèrement différente. Il me faut les coefficients pour faire un total de 1. Plus précisément, je régresse les rendements d'une série de devises contre trois autres séries de devises, de sorte …

36 r regression

3

Créer un «score de certitude» à partir des votes dans des forêts aléatoires?

Je cherche à former un classificateur qui établira une distinction entre les objets Type Aet ceux Type Bdont le nombre d’apprentissage est relativement important, soit environ 10 000 objets, dont la moitié environ Type Aet la moitié Type B. Le jeu de données comprend 100 entités continues détaillant les propriétés …

36 r machine-learning random-forest

4

Plateformes de cloud computing pour l'apprentissage automatique [fermé]

J'ai une petite liste de sociétés qui fournissent une plate-forme pour l'exécution de scripts R, python ou octave sur des clusters construits au-dessus d'Amazon EC2. Y a-t-il d'autres noms que je devrais ajouter? Nuages de nuages Opani crata

36 r machine-learning

5

Fonctions de minutage dans R [fermé]

Je voudrais mesurer le temps qu'il faut pour répéter l'exécution d'une fonction. Est-ce replicate()que l'utilisation de boucles for est équivalente? Par exemple: system.time(replicate(1000, f())); system.time(for(i in 1:1000){f()}); Quelle est la méthode préférée? En sortie de system.time(), sys+userle temps CPU réel pour exécuter le programme est-il? Une elapsedbonne mesure de la …

36 r

2

Quelle est la distribution de la somme des variables non gaussiennes?

Si est distribué , est distribué et , je sais que est distribué si X et Y sont indépendants.N ( μ X , σ 2 X ) Y N ( μ Y , σ 2 Y ) Z = X + Y Z N ( μ X + μ Y …

36 normal-distribution mathematical-statistics

10

Quelle est l'explication de votre profane préféré pour un concept statistique difficile?

J'aime beaucoup entendre des explications simples sur des problèmes complexes. Quelle est votre analogie ou anecdote préférée qui explique un concept statistique difficile? Mon préféré est l' explication de Murray sur la cointégration utilisant un ivrogne et son chien. Murray explique comment deux processus aléatoires (une personne ivre errante et …

36 teaching communication

8

Dans quelles conditions faut-il utiliser l'analyse multiniveau / hiérarchique?

Dans quelles conditions une personne devrait-elle envisager d'utiliser une analyse multiniveau / hiérarchique, par opposition à une analyse plus fondamentale / traditionnelle (par exemple, ANOVA, régression MCO, etc.)? Existe-t-il des situations dans lesquelles cela pourrait être considéré comme obligatoire? Existe-t-il des situations dans lesquelles l’analyse multiniveau / hiérarchique est inappropriée? …

36 mixed-model multilevel-analysis