Te apasiona trabajar con big data y construir soluciones innovadoras desde cero? En IT Partner España, buscamos un Data Engineer / Data Scientist con experiencia en entornos de AWS para desarrollar una plataforma de alto rendimiento para el trading electrónico y pricing en mercados financieros.
Sobre el proyecto
Formarás parte de un equipo ágil y multidisciplinar que trabaja en una nueva iniciativa estratégica respaldada a nivel ejecutivo. La plataforma se basa en AWS y permite la ingestión de datos en batch y en tiempo casi real, con almacenamiento y computación desacoplados para escalabilidad y rendimiento óptimos.
* Desarrollar y mantener ETLs eficientes para manejar grandes volúmenes de datos.
* Diseñar soluciones de ingestión, almacenamiento y procesamiento de datos.
* Contribuir al diseño técnico y documentar la arquitectura del sistema.
* Integrar la plataforma con herramientas de AWS (Athena, EMR, QuickSight) y terceros (Apache Spark, Presto, Tableau).
* Colaborar con equipos tecnológicos y de negocio para asegurar una entrega de calidad.
Requisitos mínimos :
* Experiencia mínima de 4 años en big data ingestion y manejo de grandes volúmenes de datos.
* Dominio avanzado de Tableau.
* Experiencia con SQL, Hive y Hadoop.
* Conocimientos sólidos en Python, PySpark, Pandas y JupyterLab.
* Experiencia en entornos AWS y herramientas de CI / CD (Git, Jenkins).
* Metodologías Agile y conocimiento del ciclo de vida del software.
Skills valorables :
* Experiencia con Kafka.
* Uso de AWS EMR para ejecución de clústeres de Spark.
* Conocimientos en Terraform.
* Experiencia con Ansible, Bash scripting, boto3.
Ubicación y condiciones :
Oficinas : Candidatos ubicados en Madrid, puesto que se requiere presencialidad en oficina. Probablemente, durante el primer mes 3 / 4 días en oficina, los siguientes 3 meses 3 días en oficina, y a partir del 4 mes, 2 días en oficina.
Salario, según experiencia y conocimientos.
Si buscas un reto en un proyecto innovador con tecnología puntera, te estamos esperando
#J-18808-Ljbffr