? Forma parte del futuro en Paradigma Digital?
? Buscamos talento para una posición de Senior Data Engineer.
Tienes la posibilidad de sumarte a un equipo original, flexible y comprometido. En Paradigma, valoramos tanto la experiencia como la actitud: buscamos personas con conocimientos en varias de las áreas clave y, sobre todo, con ganas de aprender, colaborar y crecer.
¿Qué buscamos?
Ingeniero/a de Datos Senior para contribuir al diseño y la implementación de una arquitectura de datos. El candidato será experto en la creación de arquitecturas Lakehouse modernas (Iceberg) y en el modelado de relaciones complejas mediante Bases de Datos de Grafos (NebulaGraph), garantizando que los datos sean trazables, gobernados y accesibles en entornos de alta seguridad.
Responsabilidades
- Arquitectura Lakehouse: Diseñar e implementar la capa de almacenamiento masivo utilizando Apache Iceberg y Polaris Catalog sobre infraestructura S3/Open S3 (MinIO), asegurando la consistencia y el rendimiento de los datos estratégicos.
- Ingeniería de Grafos: Utilizando NebulaGraph.
- Pipelines de Datos Escalables: Desarrollar procesos ETL/ELT avanzados con Spark y Python para la ingesta de fuentes heterogéneas.
- Gobierno y Calidad: Implementar la capa de observabilidad y catálogo de datos mediante OpenMetadata.
- Orquestación y Streaming: Configurar flujos de trabajo complejos con Airflow y gestionar la ingesta de eventos en tiempo real mediante Kafka.
- Optimización de Consultas: Implementar Trino como motor de consultas federadas para permitir que los analistas consulten múltiples fuentes sin duplicidad de datos.
Experiencia en
- Python, Apache Spark (PySpark).
- Lakehouse.
- Apache Iceberg, Polaris Catalog, S3/Open S3 (MinIO).
- NebulaGraph (Modelado y consultas nGQL), conocimiento general de grafos.
- OpenMetadata (Linaje, catálogo, glosario).
- Apache Airflow, Apache Kafka.
- Trino (PrestoSQL).
Deseable
- Grafana, creación de dashboards de monitorización técnica y operativa.
#J-18808-Ljbffr