Job Overview
En Veltech buscamos un Azure Data Engineer para incorporarse a un proyecto estratégico con una aerolínea. Trabajarás diseñando, implementando y optimizando soluciones de datos escalables en Microsoft Azure y Microsoft Fabric, liderando todo el ciclo de vida del dato: desde la ingesta hasta la entrega de insights, incluyendo gobernanza, seguridad e integración de capacidades de IA.
Responsibilities
1. Diseño y orquestación de pipelines de datos
Creación, despliegue y monitorización de pipelines en Azure Data Factory y/o Azure Databricks.
Estrategias de ingestión batch y streaming (Event Hubs, Azure Stream Analytics).
2. Procesamiento y almacenamiento
Modelado y optimización en Azure Synapse Analytics y Azure SQL Data Warehouse.
Gestión de grandes volúmenes en Azure Data Lake Storage Gen2 con partición y compresión.
Políticas de seguridad y cifrado (en reposo y en tránsito).
3. Azure Data Explorer (ADX) y Kusto Query Language (KQL)
Diseño de tablas ADX: ingestión por pipelines, SDKs, Event Grid.
KQL avanzado: consultas exploratorias, agregaciones, series temporales.
Funciones y políticas: parse_json, mv‑expand, estimated_statistics, update policies.
Integración: Power BI DirectQuery y dashboards nativos ADX.
Monitorización: ajuste de clústeres, escalado y análisis de costes con Azure Monitor.
4. Microsoft Fabric
Lakehouse & Warehouse: unificación de Data Lake y Synapse en un entorno integrado.
Pipelines en Fabric: orquestación con Data Factory en Fabric, notebooks de Spark en Spark Compute.
Data Engineering en Fabric: Spark SQL, PySpark y C# en Notebooks; optimización con Delta tables nativas.
Governance & Security: control con Purview integrado, políticas de acceso unificadas y encriptación automática.
Fabric Workloads: integración de Data Science (ML), Power BI en Fabric, Data Activator para eventos en tiempo real.
5. Integración y desarrollo
Transformaciones avanzadas con Apache Spark (PySpark/Scala) en Databricks o Fabric Spark Compute.
Azure Functions y .NET para microservicios data‑driven.
IaC con Terraform, Bicep o ARM Templates.
6. Business Intelligence y visualización
Dashboards en Power BI sobre Fabric o Synapse, DAX avanzado, DirectQuery/Composite Models.
DataOps y MLOps: CI/CD para pipelines, despliegues automáticos con Azure DevOps.
Technical Knowledge
+4 años en Data Engineering sobre Azure y Fabric. DP‑203 skills: almacenamiento, procesamiento y continuidad operativa. SQL avanzado, Python (pandas, PySpark) y/o Scala. AKS y contenedores. Inglés técnico fluido (B2).
Skills
Capacidad de resolución de problemas y pensamiento crítico para resolver desafíos de datos complejos. Habilidad para documentar procesos y soluciones técnicas de manera clara y estructurada. Comunicación efectiva tanto con equipos técnicos como no técnicos para facilitar la toma de decisiones basada en datos. Adaptabilidad y disposición para aprender y trabajar con nuevas tecnologías o actualizaciones del ecosistema Azure.
Desirable
* Gobernanza y DevOps
Seniority level
Mid‑Senior level
Employment type
Full‑time
Job function
Information Technology
Industries
Technology, Information and Internet
#J-18808-Ljbffr