Big Data Flashcards
5 V da BIG DATA
O grande VOLUME de dados e a VELOCIDADE com que são gerados fazerm com que haja dados com muita VARIEDADE. Dessa forma, as ferramentas do Big Data devem ter formas de se verificar a VERACIDADE, permitindo o processamento de dados com VALOR significativo para as empresas.
Mineração de dados
Capturar dados advindos de diversas fontes.
Insights de Big Data
Coleta: captação de dados.
Tratamento: dados são separados, tratados e estruturados.
Análise: Análise dos dados estruturados.
Programas para ajudar na coleta de dados (BIG DATA)
Pentaho, Sqoop, Spark Streaming, Kafka e Flume.
Programas para ajudar no armazenamento de dados (BIG DATA)
PostgreSQL, MySql e Apache Hadoop.
Programas para ajudar a recuperação dos dados (BIG DATA)
SGBDs, PGAdmin, Apache Drill e Apache Hive.