Italo Marcos

Resume

Universidade Estadual de Montes Claros - MG

Coleta e armazenamento de dados: Identificar e definir fontes de dados relevantes, extrair informações de diversas fontes, transformar dados brutos em formatos adequados e armazená-los em bancos de dados ou sistemas de armazenamento.
Limpeza e preparação de dados: Realizar a limpeza, organização e normalização dos dados, removendo duplicatas, tratando valores ausentes e garantindo a qualidade dos dados para uso posterior.
Desenvolvimento e manutenção de pipelines de dados: Projetar, desenvolver e implementar pipelines de dados eficientes e escaláveis, utilizando ferramentas e tecnologias como Apache Spark, Hadoop, Hive e Airflow para processar grandes volumes de dados.
Integração de sistemas e fontes de dados: Integrar diferentes sistemas e fontes de dados para garantir a disponibilidade e a integridade dos dados, realizando a sincronização, a replicação e a consolidação de informações de várias fontes.

Coleta e armazenamento de dados: Identificar e definir fontes de dados relevantes, extrair informações de diversas fontes, transformar dados brutos em formatos adequados e armazená-los em bancos de dados ou sistemas de armazenamento.
Limpeza e preparação de dados: Realizar a limpeza, organização e normalização dos dados, removendo duplicatas, tratando valores ausentes e garantindo a qualidade dos dados para uso posterior.
Desenvolvimento e manutenção de pipelines de dados: Projetar, desenvolver e implementar pipelines de dados eficientes e escaláveis, utilizando ferramentas e tecnologias como Hive e Jiang ETL para processar grandes volumes de dados.