Engenheiro de Dados – 21367/5

Estamos em busca de um Engenheiro de Dados Sênior para integrar a equipe de BI. O profissional será responsável pela estruturação e otimização da arquitetura de dados, atuando no processamento e orquestração de grandes volumes de dados para atender às necessidades analíticas e operacionais da empresa. Buscamos alguém que tenha perfil analítico, proatividade e capacidade de resolver problemas complexos com eficiência.

Responsabilidades

• Diagnosticar, estruturar e otimizar a arquitetura de dados, garantindo eficiência e escalabilidade.
• Implementar pipelines de dados utilizando AWS Glue, Spark e PySpark.
• Migrar e traduzir scripts Python para PySpark, otimizando a arquitetura distribuída.
• Trabalhar com cientistas de dados para facilitar o acesso a dados e aprimorar o desempenho.
• Criar e gerenciar ambientes centralizados para desenvolvimento e produção.
• Validar e otimizar o consumo de DPU em processos de ETL, reduzindo custos.
• Definir boas práticas de versionamento, monitoramento e governança de dados.
• Explorar soluções gerenciadas, como AWS EMR, para melhorar performance e escalabilidade.

Requisitos da Vaga
Formação Acadêmica: Ensino superior completo em Ciência da Computação, Engenharia, Sistemas de Informação ou áreas correlatas.

Conhecimentos Técnicos:

• Experiência sólida em engenharia de dados, com foco em arquitetura escalável e processamento de grandes volumes de dados.
• Experiência com AWS Glue, Spark, PySpark e construção de pipelines de dados em cloud (AWS, GCP ou Azure).
• Conhecimento em bancos de dados SQL e NoSQL.
• Experiência em CI/CD, Git e automação de processos.
• Análise e otimização de custos de processamento e armazenamento na nuvem.

Diferenciais:

• Experiência com AWS EMR, Databricks, Snowflake e Delta Lake.
• Conhecimento em Kubernetes, Docker e ferramentas de observabilidade (CloudWatch, Prometheus, Grafana).
• Certificações AWS Data Analytics, Big Data ou similares.

Se você busca desafios em um ambiente inovador, colaborativo e com tecnologia de ponta, venha fazer parte do nosso time!