Engenheiro de Dados

Conheça mais sobre a Central da Visão:

https://centraldavisao.com.br/quem-somos/

Entenda o modelo de negócios da CdV:

https://www.youtube.com/watch?v=pwKi2TgyM7o

Atividades:

1. Construção e Manutenção de Pipelines de Dados: Desenvolver, implementar e gerenciar pipelines para extração, transformação e carregamento de dados (ETL/ELT). Garantir a qualidade, consistência e integridade dos dados processados.
2. Modelagem e Armazenamento de Dados: Criar e manter estruturas de dados eficientes (bancos de dados relacionais e não relacionais, data warehouses e data lakes). Implementar soluções de armazenamento em GCP.
3. Otimização de Performance: Monitorar e otimizar a performance das bases de dados e pipelines para melhorar a eficiência e reduzir custos. Implementar processos de escalabilidade para grandes volumes de dados.
4. Integração de Dados: Integrar dados de múltiplas fontes, como sistemas internos, APIs externas, streaming e arquivos. Garantir que os dados estejam disponíveis para uso por analistas e cientistas de dados.
5. Governança e Segurança de Dados: Implementar políticas de governança, controle de acesso e segurança de dados. Garantir a conformidade com regulamentações (ex.: LGPD, GDPR).
6. Automação de Processos: Desenvolver automações para ingestão e processamento de dados em tempo real e batch. Criar scripts e ferramentas para otimizar workflows de dados.

Necessário:

Conhecimento de BigQuery e GCP (Google Cloud Platform)