Overfitting é quando um modelo de aprendizado de máquina se ajusta tão bem aos dados de treinamento, mas tão bem, que captura até o ruído e as variações irrelevantes. Queremos treinar um modelo com sinal, e não com ruído. Com aumento do poder computacional, esse risco é cada vez mais presente. Temos a ilusão de …
O Teorema do Limite Central é um dos mais importantes da Estatística: ele mostra como a aleatoriedade de pequenas partes pode resultar em um comportamento previsível quando olhamos muitas observações. Não importa como é a distribuição inicial, se você pegar a média de muitos resultados, essa média vai formar uma curva em forma de sino, …
Continue lendo Pequeno Experimento com Teorema do Limite Central
Relembrando a pergunta. Eu tenho três moedas. A primeira tem cara dos dois lados, a segunda tem cara num lado e coroa do outro, e a terceira tem coroa dos dois lados. Digamos que eu tenha colocado as três moedas numa cartola e sorteado uma das moedas. A moeda sorteada tem cara em um dos …
Continue lendo Resposta do puzzle sobre probabilidades condicionais
Como detectar uma fraude financeira, tendo conhecimento de estatística? A Lei de Benford pode ajudar a detectar uma atividade suspeita. Auditores usam esta lei para identificar irregularidades em dados financeiros e contábeis. A Lei de Benford é baseada nos primeiros dígitos (de 1 a 9) de um conjunto de dados: A fração dos valores que começam …
A seguir, recomendações de livros sobre Estatística e Aleatoriedade, com o selo de recomendação Forgotten Lore! "Como Mentir com Estatística", de Darrell Huff: Um guia clássico que revela como os números podem ser distorcidos e usados de forma enganosa em várias situações. "Estatística: O Que É, Para Que Serve, Como Funciona", de Charles Wheelan: O …
Continue lendo 6 Recomendações de Livros sobre Estatística e Aleatoriedade
Agradeço pelo reconhecimento como um dos tutores (e líderes) da Trilha Analytics Klabin 2023. Foram 35 analistas, de todas as áreas de negócio da empresa, aprendendo tópicos que foram de Estatística e Storytelling com Dados, passando por Excel e Power BI, até chegar a VBA e Python para Data Science. Como trabalho final, os participantes …
Segue, no link, uma pequena aula sobre estatística, no meu blog de Excel. https://ferramentasexcelvba.wordpress.com/2023/11/19/estatistica-parte-1/?page_id=2631
Numa linha de produção de parafusos, 0,1% das unidades possuem defeitos de fabricação, que ocorrem aleatoriamente e de forma independente. Os clientes usam as seguintes regras de aceite: - Caixas com 50 unidades: até 1 parafuso com defeito- Caixas com 100 unidades: até 2 parafusos com defeito Quando o número de itens com defeito ultrapassa …
Continue lendo Um desafiozinho de Estatística para os experts
A regressão logística é uma adaptação da famosa regressão linear, para os casos em que precisamos prever uma categoria de saída ao invés de um número. Ela utiliza uma função logística para modelar o resultado de uma variável dependente binária a partir de uma (ou mais) variáveis independentes. E o que seria uma categoria? Uma …
Continue lendo Regressão logística – Domine esta técnica poderosa
Para quem gosta de probabilidade e estatística, indico o filme "Quebrando a banca". É baseado num professor e num grupo de alunos brilhantes, que utilizando um método de contagem de cartas, conseguem ganhar alguns milhões de dólares nos cassinos de Las Vegas, no jogo 21. É mais ou menos assim: um comparsa do grupo ficava …
Interpretação da Regra de Bayes, com exemplo ilustrativo e poucas fórmulas.
Recomendação de filme: O Matemático, no Amazon Prime Video. É sobre a vida de Stanislaw Ulam, matemático envolvido no Projeto Manhattan (da bomba atômica) e da bomba de Hidrogênio. Cena do filme "O Matemático" Na verdade, é um filme bem chato de assistir. Ritmo lento. Boring. Primeiro, que mesmo nos ciclo dos matemáticos e físicos, …
Forgotten Lore 
Você precisa fazer login para comentar.