Estatísticas e Big Data

Estou escrevendo um artigo que usa assintóticos de preenchimento e um dos meus revisores solicitou que eu forneça uma definição matemática rigorosa do que é assintóticos de preenchimento (ou seja, com símbolos e notações matemáticas). Parece que não consigo encontrar nada na literatura e esperava que alguém pudesse me apontar …

10 asymptotics  definition 

Em várias fontes (veja, por exemplo, aqui ), a seguinte fórmula é fornecida para o intervalo de confiança da mediana (especialmente com o objetivo de desenhar entalhes em gráficos de caixa e bigode): 95 % C Eum e d i a n= M e d i a n ± 1,57 …

10 confidence-interval  median  boxplot  interquartile 

O que significa a notação (ponto sobre o til), no contexto como ? x ˙ ~ N(0,1)∼˙∼˙\dot\simx ∼˙N( 0 , 1 )x∼˙N(0,1)x \mathrel{\dot\sim} \mathcal N(0,1) Acontece que é mais fácil descobrir como digitar corretamente: tex.SE explica que é preciso digitar em \mathrel{\dot\sim}vez de simplesmente \dot\simcorrigir o problema de espaçamento - …

10 mathematical-statistics  notation 

Estou fazendo um estudo sobre o uso de drogas múltiplas. Eu tenho um conjunto de dados de 400 viciados em drogas, cada um declarando as drogas que abusam. Existem mais de 10 medicamentos e, portanto, existem grandes combinações possíveis. Recodifiquei a maioria das drogas que eles consomem em variáveis ​​binárias …

10 hypothesis-testing  clustering  combinatorics  association-measure  association-rules 

Como posso obter p,d and qvalores no ARIMA(p,d,q)modelo estimado por auto.arima(mytimeseries)? arima_model <- auto.arima (mytimeseries, ic = 'bic') Se olharmos para a saída de arima_model $ arma Nós temos, [1] 1 0 0 0 1 2 0 Qual é o significado dos números que aparecem na sequência acima?

10 r  arima 

Prove / refute E[ 1UMA| Ft] = 0 ou 1 a.s. ⇒ E [ 1UMA| Fs] = E[ 1UMA| Ft] como E[1A|Ft]=0 or 1 a.s. ⇒E[1A|Fs]=E[1A|Ft] a.s.E[1_A | \mathscr{F_t}] = 0 \ \text{or} \ 1 \ \text{a.s.} \ \Rightarrow E[1_A | \mathscr{F_{s}}] = E[1_A | \mathscr{F_t}] \ \text{a.s.} Dado um …

10 probability  conditional-probability  random-variable  filter 

Estou tentando entender o uso da regressão logística nas tabelas de contingência 2x2 e ix2. Por exemplo, usando isso como um exemplo Qual é a diferença entre usar o teste qui-quadrado e usar regressão logística? Que tal uma tabela com vários fatores nominais (tabela Ix2) como esta: Existe uma pergunta …

10 logistic  chi-squared  logit  contingency-tables 

Problemas de classificação com limites não lineares não podem ser resolvidos por um simples perceptron . O código R a seguir é para fins ilustrativos e baseia-se neste exemplo em Python): nonlin <- function(x, deriv = F) { if (deriv) x*(1-x) else 1/(1+exp(-x)) } X <- matrix(c(-3,1, -2,1, -1,1, 0,1, …

10 r  neural-networks  svm  kernel-trick  perceptron 

No presente trabalho (disponível gratuitamente via PubMed Central), os autores usam regressão binomial negativa para modelar a pontuação em um instrumento de triagem de 10 itens marcou 0-40. Este procedimento assume dados de contagem, o que claramente não é o caso aqui. Gostaria de suas opiniões sobre se essa abordagem …

10 regression  negative-binomial  count-data 

Atualmente, estou lendo a técnica de visualização t-SNE e foi mencionado que uma das desvantagens do uso da análise de componentes principais (PCA) para visualizar dados de alta dimensão é que ela preserva apenas grandes distâncias em pares entre os pontos. Os pontos de significado que estão distantes no espaço …

10 machine-learning  data-visualization  pca  tsne 

Uma rede de mundo pequeno é um tipo de gráfico matemático no qual a maioria dos nós não é vizinhos um do outro, mas a maioria dos nós pode ser alcançada entre si por um pequeno número de saltos ou etapas. Especificamente, uma rede de mundo pequeno é definida como …

10 hypothesis-testing  graph-theory  networks 

Suponha que eu esteja tentando redefinir uma função de probabilidade que seja exponencialmente distribuída. Se minha função de probabilidade original for: p ( y∣ θ ) = θ e- θ yp(y∣θ)=θe−θy p(y \mid \theta) = \theta e^{-\theta y} e eu gostaria de re-parametrizar usando , já queθnão é uma variável …

10 regression  bayesian  mathematical-statistics 

Hoje, nosso professor declarou em sala de aula que "não é possível adaptar demais aos classificadores lineares". Considero que isso está errado, uma vez que até os classificadores lineares podem ser sensíveis a outliers no conjunto de treinamento - por exemplo, uma margem rígida Support Vector Machine: Um único ponto …

10 classification  overfitting 

Eu tenho alguns dados que existem em um gráfico . Os vértices pertencem a uma das duas classes e estou interessado em treinar um SVM para distinguir entre as duas classes. Um kernel apropriado para isso é o kernel de difusão , onde é o Laplaciano de e é um …

10 svm  cross-validation  kernel-trick  graph-theory 

Tenho uma pergunta sobre a validade do uso do RMSE (Root Mean Squared Error) para comparar diferentes modelos logísticos. A resposta é ou 0ou 1e as previsões são probabilidades entre 0- 1? A maneira aplicada abaixo também é válida com as respostas binárias? # Using glmnet require(glmnet) load(url("https://github.com/cran/glmnet/raw/master /data/BinomialExample.RData")) cvfit …

10 regression  logistic  generalized-linear-model  glmnet  rms