Estatísticas e Big Data

Digamos que há m+nm+nm+n elementos divididos em dois grupos ( mmm e nnn ). A variância do primeiro grupo é σ2mσm2\sigma_m^2 e a variância do segundo grupo é σ2nσn2\sigma^2_n . Os próprios elementos são assumidas ser desconhecido mas sei os meios μmμm\mu_m e μnμn\mu_n . Existe uma maneira de calcular …

32 variance  pooling 

Sou completamente novo em redes neurais, mas estou muito interessado em entendê-las. No entanto, não é nada fácil começar. Alguém poderia recomendar um bom livro ou qualquer outro tipo de recurso? Existe uma leitura obrigatória? Sou grato por qualquer tipo de dica.

32 machine-learning  neural-networks  references 

Como explicamos a diferença entre regressão logística e rede neural para um público que não tem formação em estatística?

32 logistic  neural-networks 

Como adiciono um polígono puro em torno de um grupo de pontos em um gráfico de dispersão? Estou usando o ggplot2, mas estou decepcionado com os resultados de geom_polygon. O conjunto de dados está lá , como um arquivo de texto delimitado por tabulação. O gráfico abaixo mostra duas medidas …

32 ggplot2  scatterplot 

Existe um número de estimadores robustos de escala . Um exemplo notável é o desvio absoluto mediana que se relaciona com o desvio padrão como σ=MAD⋅1.4826σ=MAD⋅1.4826\sigma = \mathrm{MAD}\cdot1.4826 . Em uma estrutura bayesiana, existem várias maneiras de estimar com robustez a localização de uma distribuição aproximadamente normal (por exemplo, um …

32 r  bayesian  estimation  standard-deviation  robust 

Um artigo "Computando com precisão a variação de execução" em http://www.johndcook.com/standard_deviation.html mostra como calcular a média de execução, a variação e os desvios padrão. Existem algoritmos nos quais os parâmetros de um modelo de regressão linear ou logística podem ser similarmente "atualizados dinamicamente" à medida que cada novo registro de …

32 regression  logistic  online 

Quando assisto às notícias, notei que as pesquisas da Gallup sobre coisas como eleições presidenciais têm [suponho aleatoriamente] tamanhos de amostra bem acima de 1.000. Pelo que me lembro das estatísticas da faculdade, o tamanho de uma amostra de 30 era uma amostra "significativamente grande". Parece que um tamanho de …

32 sampling  sample-size  power-analysis 

Eu tenho um modelo de efeito misto (de fato, um modelo misto aditivo generalizado) que me fornece previsões para séries temporais. Para combater a autocorrelação, eu uso um modelo corCAR1, pois tenho dados ausentes. Os dados devem fornecer uma carga total, portanto, preciso somar todo o intervalo de previsão. Mas …

32 mixed-model  variance  random-variable 

Você pode ter dados em formato amplo ou em formato longo. Isso é muito importante, pois os métodos utilizáveis ​​são diferentes, dependendo do formato. Eu sei que você tem que trabalhar com melt()e a cast()partir do pacote de reformulação, mas parece que algumas coisas eu não entendo. Alguém pode me …

32 data-transformation  r 

Como obter uma importância variável (atributo) usando o SVM?

32 machine-learning  feature-selection  svm 

" Como não classificar pela classificação média " de Evan Miller propõe usar o limite inferior de um intervalo de confiança para obter uma "pontuação" agregada sensata para os itens classificados. No entanto, está trabalhando com um modelo de Bernoulli: as classificações são positivas ou negativas. Qual é um intervalo …

32 confidence-interval  estimation 

Sou programador sem formação estatística e atualmente estou procurando métodos de classificação diferentes para um grande número de documentos diferentes que quero classificar em categorias predefinidas. Eu tenho lido sobre kNN, SVM e NN. No entanto, tenho alguns problemas para começar. Quais recursos você recomenda? Eu sei muito bem o …

32 classification  information-retrieval  text-mining 

Estou analisando um conjunto de dados experimental. Os dados consistem em um vetor pareado do tipo de tratamento e um resultado binomial: Treatment Outcome A 1 B 0 C 0 D 1 A 0 ... Na coluna de resultados, 1 indica sucesso e 0 indica falha. Eu gostaria de descobrir …

32 logistic  anova  binomial  experiment-design 

Fiquei me perguntando se existem distribuições além do normal, onde a média e a variação são independentes uma da outra (ou em outras palavras, onde a variação não é uma função da média).

32 distributions 

Essa é uma pergunta semelhante à aqui , mas acho que vale a pena perguntar o suficiente. Eu pensei em colocar como entrada, o que acho que é um dos mais difíceis de entender. A minha é a diferença entre probabilidade e frequência . Um está no nível de "conhecimento …

32 teaching