Engenheiro de Dados

Responsabilidades

• O profissional estará encarregado de contribuir para o projeto de implementação de sistemas escaláveis de ETL e processamento de dados para entrar em nosso ecossistema de Big Data;
• O profissional deverá estar apto a fazer levantamento de requisitos para entender os dashboards e relatórios a serem desenvolvidos bem como realizar o mapeamento de fontes de dados;
• O profissional deverá desenvolver de ETLs utilizando ferramentas adequadas para essa atividade;
• O profissional ficará encarregado de construir além de ETLs, relatórios e dashboards nas ferramentas disponibilizadas pela MFS.
• O profissional deverá estabelecer a direção técnica para o projeto em questão, junto com as equipes de engenharia de dados, arquitetura de solução e infraestrutura, impulsionando as mudanças necessárias e fazendo escolhas tecnológicas adequadas;
• Habilidades
• Conhecimento avançado em ferramentas de ETL, preferencialmente Pentaho.
• Conhecimento avançado em banco de dados, incluindo arquitetura e modelagem. Tecnologias preferenciais: MongoDB, Postgress, DocumentDB e Oracle.
• Conhecimento em Python.
• Conhecimento em Data Visualization, preferencialmente Spotfire e Power BI.
• Conhecimento em ferramentas de Dados / Datalake em Cloud, preferencialmente AWS (Athena, EMR, Redshift, Kinesis, Elasticsearch, Glue, etc).
• Conhecimento em Cloud AWS (Rancher, S3, Lamba).
• Experiencia em levantamento de requisitos e especificação técnica para o desenvolvimento de ETLs/ Relatórios.
• Conhecimento CI/CD, GITLAB.