AWS Data Engineer | MID/Senior

Job description

.

Main responsibilities

• Projetar, desenvolver e implementar arquiteturas de dados escaláveis e de alto desempenho na AWS;
• Configurar e gerenciar serviços de armazenamento de dados, como Amazon S3, Amazon Redshift, Amazon DynamoDB, Amazon RDS, entre outros;
• Desenvolver e otimizar pipelines de dados para ingestão, transformação e carga (ETL) de dados em ambientes distribuídos e em tempo real;
• Criar e manter infraestruturas de dados seguras, resilientes e altamente disponíveis na AWS;
• Automatizar tarefas de gerenciamento e monitoramento de dados usando ferramentas e scripts relevantes;
• Realizar testes e depuração de soluções de dados para garantir a qualidade e a integridade dos dados;
• Ficar atualizado com as melhores práticas da AWS e as tendências do setor para identificar oportunidades de melhoria contínua;
• Criar tarefas para replicação contínua usando o AWS DMS (CDC), ou similar.

Requirements and skills

• Experiência em projetos de BI/Analytics;
• Proficiência em SQL;
• Entendimento de modelagem dimensional;
• Experiência com ETL (qualquer ferramenta);
• Experiência com cloud (Azure);
• Experiência em Python, Scala, Spark, Shell Script;
• Experiência com cloud AWS;
• Experiência sólida com Azure Data Factory e Azure Databricks;
• Inglês intermediário.