Scalian es una empresa de más de 6.000 personas con una dimensión internacional, con oficinas en Europa y América del Norte. Estamos especializados en ofrecer servicios a diferentes clientes enfocados en Data, Cloud e Inteligencia Artificial.
Buscamos un perfil de Ingeniero/a de datos que pueda liderar un squad de 6 personas para uno de nuestros proyectos en el sector bancario.
Responsabilidades:
* Diseño e implementación de pipelines de datos con Apache Spark / Pyspark en AWS.
* Gestión de workflows ETL complejos.
* Realizar transformaciones complejas y cálculos intensivos sobre grandes volúmenes de datos con Apache Spark.
* Modelado de datos, diseño de esquemas optimizados y manejo de datos a gran escala.
* Implementación de procesos de CI / CD y despliegues automatizados en AWS.
* Colaborar con el área de Cloud y TechHub para optimizar la infraestructura de AWS que soporta los procesos ETL.
* Actuar como punto de contacto con stakeholders, responsable de producto y otros líderes técnicos, para alinear los modelos de datos con el reporting y los objetivos del negocio.
* Liderar al equipo de Data Engineering, asignando tareas y revisando entregas, promoviendo la mejora técnica dentro del equipo.
* Requisitos mínimos:
* Experiencia de al menos 5 años como Data Engineer trabajando con Python, Spark y Pyspark.
* Habilidades avanzadas con la herramienta AWS.
* Experiencia avanzada con SQL y PostgreSQL.
* Familiaridad con procesos de CI / CD.
* Experiencia en modelado, ingesta y transformación de datos.
* Experiencia previa liderando equipos.
Habilidades deseables:
* Experiencia con procesamiento de datos en tiempo real.
Ubicación:
Lleida, Provincia de Lleida, España.
#J-18808-Ljbffr