Engenheiro de Dados
Descrição da oferta de emprego
Job description
AWS
- Experiência prática com AWS Lambda para orquestração e execução de tarefas serverless.
- Domínio de Amazon S3 para armazenamento e organização de dados em data lakes.
- Proficiência com AWS Glue (ETL jobs, crawlers, Glue Studio, catálogo de dados).
- Conhecimento sólido em AWS Athena para consultas SQL sobre dados no S3.
- Familiaridade com configuração e troubleshooting de redes na AWS (VPCs, subnets, endpoints, segurança).
Modelagem e Transformação de Dados
- Experiência com dbt (Data Build Tool): criação de modelos, macros, testes, documentação e uso de ambientes.
- Conhecimento em modelagem de dados (ex: star schema, snowflake, data vault).
- Experiência com pipelines de dados batch e arquiteturas ELT.
Linguagens e Ferramentas
- Proficiência em SQL (nível avançado).
- Experiência com Python (para scripts, Lambda e Glue).
- Familiaridade com Git e versionamento de código.
- Experiência com CI/CD para pipelines de dados e automação de deploy de dbt.
Requirements and skills
- Formação superior em Ciência da computação, redes, engenharia ou curso correlato;
- Experiência com SQL para extração e processamento de dados;
- Experiência com modelagem dimensional;
- Conhecimento em Linux para execução de queries;
- Conhecimento em Apache Airflow;
- Conhecimento em Azure Functions ou Azure Machine Learning;
- Inglês avançado;
- Habilidades de comunicação, organização, gerenciamento de projetos, flexibilidade e resiliência.
Additional information
Modalidade Presencial ou Híbrido