Buscamos un/a Data Engineer con experiencia en entornos cloud para el desarrollo, despliegue y mantenimiento de pipelines de datos (ETL/ELT) en Azure y Databricks. Formarás parte de un equipo de datos colaborativo, trabajando junto a arquitectos, analistas y científicos de datos en la construcción de soluciones robustas, escalables y orientadas a la calidad del dato.
Funciones:
- Diseñar, desarrollar y mantener pipelines de datos (ETL/ELT) en entornos cloud.
- Trabajar con plataformas de datos basadas en Azure y Databricks.
- Diseñar y construir data marts anonimizados dentro de la plataforma corporativa de datos.
- Implementar procesos de ingesta, transformación y almacenamiento de datos.
- Optimizar jobs y clusters en Apache Spark.
- Gestionar workflows y jobs en Databricks.
- Trabajar con arquitecturas Lakehouse y medallion architecture.
- Diseñar modelos de datos eficientes y escalables.
- Implementar procesos de anonimización de datos garantizando calidad y cumplimiento.
- Asegurar la calidad, consistencia y fiabilidad del dato.
- Generar documentación técnica y evidencias de implementación.
- Colaborar con equipos de datos (arquitectos, analistas, data scientists).
- Resolver incidencias en entornos productivos y optimizar rendimiento.
- Aplicar buenas prácticas de desarrollo, versionado y CI/CD.
