22 sep
|
Capitole
|
Castro Urdiales
22 sep
Capitole
Castro Urdiales
Buscamos un/aTodos los posibles candidatos deben leer con atención los siguientes detalles de este trabajo antes de presentar una candidatura.Data Engineer Seniorpara diseñar y operar la plataforma de datos que alimenta unsistema de pricing dinámicoeinteligenciadenegocioen entornos retail de alto volumen. La persona seleccionada será elreferente técnico de la arquitectura de datos:desde la ingesta de fuentes operacionales (ERP, POS, e-commerce, footfall) hasta la exposición de datos listos para consumo por modelos de ML y herramientas de BI.El rol requieredominio profundo de Databrickscomo plataforma central y sólido conocimiento de laarquitectura Medallion(Bronze / Silver / Gold), así como experiencia enmodelado de datos dimensionaly capacidad para trabajar conAzure Data Factorycomo orquestador de pipelines.Responsabilidades principales● Diseño y evolución de la arquitectura Medallion (Bronze → Silver → Gold) sobre Databricks / Delta Lake.● Definición de estándares de ingesta, particionado, compactación y versionado de tablas Delta.● Gobierno de la plataforma: Unity Catalog,
gestión de permisos, linaje de datos y calidad (Great Expectations o similar).● Evaluación y decisión de patrones de procesamiento: batch, micro-batch (Structured Streaming) y near real-time según el caso de uso.● Diseño de modelos dimensionales (esquemas estrella y copo de nieve) orientados a casos de uso de pricing, forecasting y personalización.● Definición de tablas de hechos y dimensiones: transacciones POS, catálogo de productos, maestro de tiendas, calendario promocional.● Colaboración con el equipo de ML para diseñar y mantener el feature store sobre la capa Gold.● Documentación del modelo de datos en un catálogo semántico accesible para usuarios de negocio y analítica.● Construcción de pipelines de ingesta desde fuentes heterogéneas: ERP (SAP u otros), POS, APIs de e-commerce, feeds de Retail Media, NPS.● Uso de Azure Data Factory para orquestación de movimientos de datos entre sistema
📌 Data Engineer (Castro Urdiales)
🏢 Capitole
📍 Castro Urdiales