En BETWEEN, buscamos el mejor talento tecnológico para formar parte de nuestros proyectos innovadores. Somos una empresa que trabaja con las tecnologías más avanzadas, en áreas como BI, IoT, Big Data e I+D, además de ofrecer soluciones en Service Desk, Infraestructuras IT y Cloud, entre otros.
Estamos buscando un/a Data Engineer para reforzar el equipo de IT en el área de Salud, Seguridad y Medioambiente (HSE). Tu misión será impulsar el desarrollo e implementación de un data lake para recopilar, procesar y almacenar datos medioambientales procedentes de distintas plantas de producción en Europa.
Funciones Principales
* Diseñar, desarrollar y mantener pipelines de datos escalables utilizando Azure Databricks.
* Colaborar con analistas de datos para entender requisitos y ofrecer soluciones eficientes.
* Implementar procesos de integración y transformación de datos desde múltiples fuentes, incluidas REST APIs.
* Optimizar y resolver incidencias en flujos de datos, garantizando rendimiento y fiabilidad.
* Asegurar la calidad y coherencia de los datos, tanto estructurados como no estructurados.
* Mantenerse al día de las mejores prácticas y tendencias en data engineering, Databricks y tecnologías de integración de datos.
Requisitos
* Experiencia demostrable como Data Engineer con foco en Azure Databricks y ecosistema Microsoft Azure (Data Lake Storage, Data Factory, SQL Services…).
* Conocimiento de la arquitectura Lakehouse / Medallion.
* Dominio de SQL, Python y Apache Spark.
* Experiencia en consumo seguro y eficiente de REST APIs, transformación de datos JSON/XML en Python/Databricks.
* Valorable: gestión y gobierno de datos con Unity Catalog.
* Capacidad para crear reportes técnicos en Power BI.
* Hábito de documentar tu trabajo (Wiki, DevOps…).
* Inglés fluido (valorables otros idiomas como francés, neerlandés o español).
Perfil Personal
* Autónomo/a, flexible, organizado/a y meticuloso/a.
* Orientación a la resolución de problemas, con enfoque práctico y atención al detalle.
* Mentalidad colaborativa y capacidad para trabajar en equipo multidisciplinar.
#J-18808-Ljbffr