Um amigo meu sugeriu que a indústria de software precisa principalmente de habilidades de "big data", não de estatísticas por si só.
Embora esteja parcialmente de acordo com o comentário de seu amigo, gostaria de salientar que em qualquer setor, as ferramentas de Big Data são optadas, apenas se todos os Vs estiverem satisfeitos.
Trabalho como chefe de ciência de dados em uma empresa líder de suporte ao cliente. Aqui, faço hacking de dados tanto para o produto quanto para o crescimento da empresa.
Eu uso principalmente técnicas de análise de séries temporais para previsão de rotatividade e análise de vendas. Isso também inclui a análise comportamental dos clientes, da concorrência e do setor.
No lado do produto, usamos várias técnicas, começando pela análise de sentimentos usando LSTM, algoritmos de recomendação etc.
Mas o foco principal está na análise de séries temporais. O fluxo de trabalho geral seria:
- Limpando e moldando os dados.
- as análises exploratórias e explicativas que envolvem a identificação de sazonalidade, tendências e ciclos. Portanto, é preciso explorar correlações, correlações automáticas e várias estatísticas univariadas e bivariadas; juntamente com uma extensa plotagem, incluindo as curvas scatter, AFC e PAFC.
- Agora vem a parte de previsão, onde vários modelos são testados entre si, levando o passo 2 em consideração séria.
Ferramentas usadas por mim: R, Python e Excel às vezes.
E mesmo a combinação de ciência de dados e hackers de crescimento provou fazer mágica no domínio do marketing. Portanto, a demanda por estatísticos e nerds da matemática permaneceria como está; e não vai declinar em lugar algum no futuro próximo; especialmente quando as startups focadas no cliente estão florescendo em todo o mundo.