Statistiques et Big Data

Q & A pour les personnes intéressées par les statistiques, l'apprentissage automatique, l'analyse de données, l'exploration de données et la visualisation de données


2
Peut augmentent lorsque
Si β∗=argminβ∥y−Xβ∥22+λ∥β∥1β∗=argminβ‖y−Xβ‖22+λ‖β‖1\beta^*=\mathrm{arg\,min}_{\beta} \|y-X\beta\|^2_2+\lambda\|\beta\|_1 , ∥β∗∥2‖β∗‖2\|\beta^*\|_2 augmenter lorsque λλ\lambda augmente? Je pense que c'est possible. Bien que ∥β∗∥1‖β∗‖1\|\beta^*\|_1 n'augmente pas lorsque λλ\lambda augmente (ma preuve ), ∥β∗∥2‖β∗‖2\|\beta^*\|_2 peut augmenter. La figure ci-dessous montre une possibilité. Lorsque λλ\lambda augmente, si β∗β∗\beta^* déplace (linéairement) de PPP vers QQQ , alors ∥β∗∥2‖β∗‖2\|\beta^*\|_2 augmente tandis …
11 lasso 

4
Diviser les données en N groupes égaux
J'ai un cadre de données qui contient des valeurs sur 4 colonnes: Par exemple: ID, price, click count,rating Ce que je voudrais faire, c'est "diviser" cette trame de données en N groupes différents où chaque groupe aura un nombre égal de lignes avec la même distribution de prix, le nombre …
11 r  distributions 

1
Comment puis-je calculer
Comment évaluer l'attente du CDF normal au carré sous forme fermée? E [ Φ ( a Z+ b )2] = ∫∞- ∞Φ ( a z+ b )2ϕ ( z)rézE[Φ(uneZ+b)2]=∫-∞∞Φ(unez+b)2ϕ(z)réz\mathbb{E}\left[\Phi\left(aZ+b\right)^{2}\right] = \int_{-\infty}^{\infty}\Phi\left(az+b\right)^{2}\phi(z)\,dz Ici, , b sont des nombres réels, Z ∼ N ( 0 , 1 ) , et ϕ ( …


3
Classificateur avec précision réglable vs rappel
Je travaille sur un problème de classification binaire où il est beaucoup plus important de ne pas avoir de faux positifs; beaucoup de faux négatifs sont ok. J'ai utilisé un tas de classificateurs dans sklearn par exemple, mais je pense qu'aucun d'entre eux n'a la capacité d'ajuster explicitement le compromis …




2
Pourquoi la convolution fonctionne-t-elle?
Je sais donc que si nous voulons trouver la distribution de probabilité d'une somme de variables aléatoires indépendantes , nous pouvons la calculer à partir des distributions de probabilité de et , en disantX+YX+YX + YXXXYYY fX+Y(a)=∫∞x=−∞fX,Y(X=x,Y=a−x) dx=∫∞x=−∞fX(x)fY(a−x) dxfX+Y(a)=∫x=−∞∞fX,Y(X=x,Y=a−x) dx=∫x=−∞∞fX(x)fY(a−x) dxf_{X + Y}(a) = \int_{x = -\infty}^{\infty} f_{X, Y}(X = …


2
Qu'est-ce qu'une distribution log-odds?
Je lis un manuel sur l'apprentissage automatique (Data Mining par Witten, et al., 2011) et suis tombé sur ce passage: ... De plus, différentes distributions peuvent être utilisées. Bien que la distribution normale soit généralement un bon choix pour les attributs numériques, elle ne convient pas aux attributs qui ont …


2
Comment effectuer une analyse résiduelle pour les prédicteurs indépendants binaires / dichotomiques en régression linéaire?
J'effectue la régression linéaire multiple ci-dessous dans R pour prédire les rendements des fonds gérés. reg <- lm(formula=RET~GRI+SAT+MBA+AGE+TEN, data=rawdata) Ici, seuls GRI et MBA sont des prédicteurs binaires / dichotomiques; les prédicteurs restants sont continus. J'utilise ce code pour générer des tracés résiduels pour les variables binaires. plot(rawdata$GRI, reg$residuals) abline(lm(reg$residuals~rawdata$GRI, …


En utilisant notre site, vous reconnaissez avoir lu et compris notre politique liée aux cookies et notre politique de confidentialité.
Licensed under cc by-sa 3.0 with attribution required.