Estatísticas e Big Data

Eu tenho um problema de classificação binária e experimento diferentes classificadores: quero comparar os classificadores. qual é uma medida melhor da AUC ou da precisão? E porque? Raondom Forest: AUC: 0.828 Accuracy: 79.6667 % SVM: AUC: 0.542 Accuracy: 85.6667 %

11 machine-learning  classification  auc 

Estou lutando para fazer a conexão matemática entre uma rede neural e um modelo gráfico. Nos modelos gráficos, a ideia é simples: a distribuição de probabilidade é fatorada de acordo com as cliques no gráfico, com os potenciais sendo geralmente da família exponencial. Existe um raciocínio equivalente para uma rede …

11 neural-networks  markov-process  graphical-model  deep-learning  deep-belief-networks 

Estou tentando obter o prior de Jeffreys para uma distribuição binomial negativa. Não consigo ver onde errei, por isso, se alguém puder ajudar a apontar isso, isso seria apreciado. Ok, então a situação é a seguinte: devo comparar as distribuições anteriores obtidas usando um binômio e um binômio negativo, onde …

11 probability  bayesian  inference  prior 

Eu tenho um conjunto de dados de 20 anos de uma contagem anual de abundância de espécies para um conjunto de polígonos (~ 200 polígonos de forma irregular e contínua). Eu tenho usado a análise de regressão para inferir tendências (mudança na contagem por ano) para cada polígono, bem como …

11 r  time-series  correlation  spatial  spatio-temporal 

Me deparei com esta imagem em um post aqui . Fiquei desapontado que a leitura da declaração não provocou a mesma expressão facial para mim como para esse cara. Então, o que se quer dizer com a afirmação de que a hipótese nula é como os freqüentadores expressam um prior …

11 hypothesis-testing  bayesian  frequentist  uninformative-prior 

Recentemente me disseram que o processo que segui (componente de uma tese de mestrado) poderia ser visto como excessivo. Estou procurando entender melhor isso e ver se os outros concordam. O objetivo desta parte do artigo é Compare o desempenho das árvores de regressão otimizada por gradiente com as florestas …

11 machine-learning  data-mining  predictive-models 

Minha pergunta é se posso usar um tamanho de efeito XXX como uma variável dependente e outro tamanho de efeito YYY como a variável independente em uma meta-regressão? Por exemplo, conduzi uma meta-análise dos efeitos do exercício nos problemas de bebida e encontrei resultados significativos e alta heterogeneidade. Eu quero …

11 references  meta-analysis  effect-size  meta-regression 

Eu tenho amostras de duas classes que são vetores no espaço de alta dimensão e quero plotá-las em 2D ou 3D. Conheço as técnicas de redução de dimensionalidade, mas preciso de uma ferramenta realmente simples e fácil de usar (em matlab, python ou um .exe pré-construído). Também me pergunto se …

11 data-visualization  matlab  python  dimensionality-reduction 

Estou lendo este artigo sobre Generalized Wishart Processes (GWP). O artigo calcula as covariâncias entre diferentes variáveis ​​aleatórias (seguindo o Processo Gaussiano ) usando a função de covariância exponencial ao quadrado, ou seja, . Diz então que essa matriz de covariância segue o GWP.K(x,x′)=exp(−|(x−x′)|22l2)K(x,x′)=exp⁡(−|(x−x′)|22l2)K(x,x') = \exp\left(-\frac{|(x-x')|^2}{2l^2}\right) Costumava pensar que uma …

11 machine-learning  normal-distribution  covariance  wishart  nonparametric-bayes 

Quero associar defeitos de código a métricas de complexidade de código, como proximidade. Um modelo comum é ver isso como um processo de Poisson, em que a duração é quanto tempo é gasto em codificação e a densidade é uma função da complexidade do código. Eu sou capaz de fazer …

11 regression  data-visualization  poisson-distribution 

Estou procurando um pacote de software estatístico que possa ser usado em um curso introdutório de estatística para um programa de estudos em ciências sociais. Os alunos também não têm conhecimento prévio de estatística nem experiência com linguagens de programação. O objetivo é apresentá-los a conceitos estatísticos básicos (como média, …

11 software  teaching 

Disclaimer: Isto é para um projeto de lição de casa. Estou tentando encontrar o melhor modelo para os preços dos diamantes, dependendo de várias variáveis ​​e, até agora, pareço ter um modelo muito bom. No entanto, encontrei duas variáveis ​​que são obviamente colineares: >with(diamonds, cor(data.frame(Table, Depth, Carat.Weight))) Table Depth Carat.Weight …

11 regression  correlation  self-study  model-selection  multicollinearity 

Foi feita uma pesquisa na qual as pessoas escolheram o que eles usam para exibir um certo smiley e entraram no país de origem. Recodifiquei as respostas de texto em numérico. Que forma de análise deve ser usada (preferencialmente no SPSS) para verificar o nível de correlação entre de onde …

11 correlation  spss  categorical-data 

Considere o seguinte código e saída: par(mfrow=c(3,2)) # generate random data from weibull distribution x = rweibull(20, 8, 2) # Quantile-Quantile Plot for different distributions qqPlot(x, "log-normal") qqPlot(x, "normal") qqPlot(x, "exponential", DB = TRUE) qqPlot(x, "cauchy") qqPlot(x, "weibull") qqPlot(x, "logistic") Parece que o gráfico de QQ para log-normal é quase …

11 r  data-visualization  interpretation  qq-plot 

Atualmente, estou estudando para minhas finais em estatística básica para meu bacharel em educação infantil. Embora eu ache que as contas estão em geral, não tenho uma compreensão intuitiva do que os números realmente significam (preâmbulo: usarei uma linguagem um tanto desleixada). Eu sei que E [X] é a "média …

11 mathematical-statistics  stochastic-processes  covariance  pdf