Data Engineer – Databricks
Improving
· Remote
Tiempo completo
Data Science
Hoy
Atención: eliminamos este aviso de nuestra base de datos al cabo de un mes (limpieza mensual), así que el enlace puede dejar de funcionar. Lo guardamos en tu navegador para que puedas volver a encontrarlo.
Requerimientos indispensables
- 7+ años de experiencia profesional como Data Engineer.
- Inglés intermedio/avanzado para comunicación diaria con equipos globales. – Obligatorio.
- Experiencia profesional trabajando con Databricks.
- Experiencia sólida con Python y SQL.
- Experiencia práctica con Delta Lake y Unity Catalog.
- Conocimientos de data modelling.
- Experiencia con Databricks Asset Bundles y/o Azure DevOps aplicada a procesos de CI/CD.
- Experiencia con procesamiento incremental y schema evolution.
Responsabilidades del rol
Buscamos Data Engineer con experiencia sólida en Databricks para diseñar, optimizar y mantener soluciones de datos escalables, trabajando con Delta Lake, Unity Catalog, Python y SQL.
El rol tendrá foco en el diseño y modelado de datos, procesamiento incremental, evolución de esquemas, orquestación de pipelines y prácticas de CI/CD.
Lo que harás:
- Diseñar y optimizar tablas utilizando Delta Lake.
- Implementar y mantener modelos de datos eficientes y escalables.
- Gestionar el gobierno y acceso a los datos mediante Unity Catalog.
- Desarrollar y mantener pipelines de datos en Databricks.
- Implementar procesos de procesamiento incremental y estrategias de evolución de esquemas.
- Trabajar con Databricks Asset Bundles y Azure DevOps para CI/CD.
- Participar en la automatización, optimización y mejora continua de los procesos de ingeniería de datos.
Plus relevante
Experiencia previa en proyectos de Healthcare o Insurance.
Beneficios que ofrecemos
- Contrato a largo plazo.
- 100% Remoto.
- Vacaciones y PTOs
- Posibilidad de recibir 2 bonos al año.
- 2 revisiones salariales al año.
- Clases de inglés.
- Equipamiento Apple.
- Plataforma de cursos en linea
- Budget para compra de libros.
- Budget para compra de materiales de trabajo
- mucho mas..
DatabricksDelta LakePython
Fuente: GetOnBoard