Governanca de Dados Flashcards
Ciclo de vida
Fazer pergunta - questão: descritiva, exploratória, preditiva
Obter dos dados - extração, limpeza
Compreender os dados - análise exploratória dos dados
Compreender o mundo - aplicar o modelo, generalização, algoritmo, modelo estatístico
Comunicar e visualizar os resultados - storyteling, apresentar as descobertas, dashbords
As sete etapas
Problema
Etl
Ead
Modelo descrição
Avaliação do modelo
Implantação
Monitoramento e manutenção do modelo
7 etapas do ciclo de vida
Abraham musa
Problema
Coleta de dados
Limpeza dos dados
Processamento EAD
Modelagem e avaliação
Comunicar os resultados
Manutenção e deployment
Riscos dos projetos
Dependência dos dados
Mudanças de requisitos
Mudanças de dados
Experimentação e pesquisa
Algoritimos preditivos
Altamente dependentes dos dados
Mudanças de requisitos ou
Mudanças nos dados
Clientes pedem alguma mudança
Integrae em nova fonte
Mudanças de requisitos ou
Mudanças nos dados
Clientes pedem alguma mudança
Integrae em nova fonte
Pesquisa e experimentação
Importante ter governança de dados
Planejar, testar em ambientes reduzidos
Clusterizavao, limpeza, outilier, buscando a solução
Em um projeto de ciência de dados, qual das seguintes etapas é
crucial para garantir a qualidade dos dados antes de avançar para
a construção do modelo?
Análise Exploratória de Dados (AED)
CRISP-DM
é um framework que guia as
etapas e atividades envolvidas em um
projeto de mineração de dados, desde
a compreensão inicial do problema até
a implementação e avaliação do
modelo final.
* O modelo é projetado para ser iterativo
e cíclico, permitindo ajustes contínuos
e refinamentos ao longo do projeto
A fase do CRISP-DM em que se dá a aplicação das técnicas de
mineração de dados propriamente ditas é denominada
modelagem
Etapas do CRISP DM
Entendimento do negócio
Entendimento dos dados
Preparação dados
Modelagem
Avaliação
Entrega e deployment
Preparação
ETL
Avaliação, definição das metas do projeto
Na avaliação e feito para verificar se foi alcançado as metas, se está tudo ok
Cada uma das fases do CRISP DM
Fases
Tarefas genéricas
Tarefas especializadas
Instâncias de processos