Aqui na Webmotors, o(a) Engenheiro de Dados precisa ser curioso(a) e gostar de interagir com pessoas, principalmente com os clientes (internos e externos), além do próprio time. Somos responsáveis por disponibilizar, manter e monitorar toda a plataforma de dados que é composta de diversas ferramentas para suprir o uso de dados. Trabalhar muito próximo a liderança técnica e ao time de arquitetura de softwares para garantirmos a sustentabilidade técnica dos produtos. Em resumo, precisa ser dinâmico(a), fazer as coisas acontecerem e não ficar sentado na cadeira. Precisa ser decisivo(a) e incisivo(a) nas discussões sempre contribuindo com sua visão do que acredita ser o melhor caminho ou a melhor solução, o foco é o desenvolvimento ágil de soluções.
Main responsibilities
Como será o dia a dia de trabalho?
Trabalhar com tecnologias de ponta;
Trabalhar em um ambiente informal;
Atuar em equipes multidisciplinares;
Desenvolvimento pensando nas boas práticas de desenvolvimento, escalabilidade, segurança e performance com auxílio do time;
Manutenção de aplicações e pipelines existentes com auxílio do time;
Desenvolvimento de novos pipeline de ingestão;
Otimizações de Arquitetura;
Demonstrar senso crítico técnico de processos e comportamental;
Flexível e aberto a mudanças (processos, time, código).
Requirements and skills
O que você precisa ter?
Formação superior completa em Sistemas de Informação, Ciência da Computação, Análise e Desenv. de Sistemas e afins;
Proficiência na linguagem Python, SQL e PySpark;
Proficiência com Databricks;
Proficiência em AWS (S3, IAM, Cloudformation, DMS, RDS, EC2, Lambda, API Gateway);
Proficiência com ferramentas de orquestração de pipelines de dados (Airflow, Dagster);
Experiência com modelagem de dados (relacional, dimensional, vault);
Experiência com processamento de dados distribuído (Hadoop e Spark);
Experiência com DataOps;
Experiência com CI/CD;
Boa capacidade de comunicação;
Proatividade e senso de urgência para resolver os problemas;
Conseguir compreender o negócio e descrever os relacionamentos dos dados necessários para os atingimentos dos objetivos;
Conhecimento sobre práticas e princípios ágeis.
Será um diferencial:
Certificação Databricks Data Engineer;
Certificação AWS Data Engineer Associate;
Certificação Airflow Dag Authoring;
Conhecimento em contêiner's;
Conhecimento em Airbyte;
Conhecimento em Governança de Dados;
Conhecimento em ferramentas de dataviz (Metabase, PowerBI e/ou Tableau);
Experiência com Desenvolvimento de Software.
Obtém a tua avaliação gratuita e confidencial do currículo.