Sr Data Engineer Databricks Y Python

Estamos en búsqueda de un Data Engineer con experiencia en Databricks y Python para unirse a nuestro equipo de datos. El candidato ideal deberá ser capaz de construir, optimizar y mantener soluciones de procesamiento de datos a gran escala utilizando herramientas de vanguardia. Es importante que el candidato también tenga un buen nivel de inglés, ya que trabajará con equipos internacionales y deberá comunicarse de manera efectiva en un entorno global.

Responsabilidades:

1. Diseñar, desarrollar y mantener pipelines de datos eficientes y escalables en Databricks.
2. Utilizar Python y otras herramientas asociadas para realizar procesamiento y análisis de grandes volúmenes de datos.
3. Integrar, transformar y cargar datos (ETL) desde diversas fuentes hacia plataformas de almacenamiento (Data Lakes, Data Warehouses).
4. Colaborar con científicos de datos, analistas de negocio y otros equipos técnicos para entender los requisitos de los proyectos de datos y proporcionar soluciones adecuadas.
5. Optimizar el rendimiento de los pipelines de datos y garantizar la calidad y consistencia de los datos procesados.
6. Participar en el diseño y mantenimiento de la infraestructura de datos en la nube, utilizando plataformas como AWS, Azure o Google Cloud.
7. Implementar pruebas de validación de datos, realizar análisis de calidad de datos y asegurar la integridad de las bases de datos.
8. Documentar procesos, arquitecturas y procedimientos de integración de datos.
9. Mantenerse actualizado con las mejores prácticas y las nuevas herramientas relacionadas con ingeniería de datos, incluyendo avances en Databricks y Python.

Requisitos:

1. Experiencia sólida en Databricks, especialmente en la creación de workflows y pipelines de datos.
2. Amplia experiencia en Python para el procesamiento de datos, incluyendo bibliotecas como pandas, numpy, pySpark, entre otras.
3. Conocimientos sólidos en arquitectura de datos y almacenamiento de datos (Data Lakes, Data Warehouses).
4. Experiencia trabajando con Apache Spark o tecnologías similares.
5. Familiaridad con la implementación de soluciones ETL (Extract, Transform, Load) en ambientes de producción.
6. Conocimientos de bases de datos SQL y NoSQL.
7. Buen nivel de inglés (oral y escrito), con capacidad para trabajar en un entorno internacional y comunicarte de manera efectiva con equipos globales.
8. Conocimiento en la nube (AWS, Azure, Google Cloud) es altamente deseable.
9. Habilidad para solucionar problemas complejos relacionados con el procesamiento de datos y la optimización del rendimiento.
10. Experiencia trabajando con herramientas de control de versiones (como Git).
11. Capacidad para trabajar de manera autónoma y en equipo en proyectos colaborativos.

Deseables:

1. Conocimiento en herramientas de orquestación de workflows como Airflow o Luigi.
2. Experiencia con tecnologías de contenedores como Docker.
3. Familiaridad con metodologías ágiles de desarrollo de software (Scrum, Kanban).
4. Experiencia previa en la creación de modelos de Machine Learning o en la integración de datos para proyectos de AI.

Condiciones:

1. 100 % remoto desde cualquier país de Latinoamérica.
2. Pagos en dólares (USD).
3. Acceso exclusivo a un 60% de descuento en cursos de inglés, francés, alemán, portugués e italiano gracias a nuestra colaboración con una reconocida plataforma de aprendizaje.
4. Descuentos especiales en planes de medicina, psicología, nutrición y entrenamiento físico.
5. Soporte personalizado de un Account Manager durante todo el proyecto.
6. Al completar tu primer proyecto, obtendrás acceso a nuestra comunidad de freelancers y una lista de proyectos exclusivos en más de 5 países, incluyendo EE.UU.
7. Proyecto retador con empresa de tecnología importante.

Sobre el contrato:

1. Contractor/ freelance.
2. El cliente tiene un proyecto corto (2 meses) con potencialidad de extender a 6 meses y otro que es mínimo 12 meses (1 año).