16 ago
|
Akuaro
|
Barcelona
Senior Data Engineer | Azure Databricks, Kafka & Industrial Data Zona Martorell–Rubí (Vallés Occidental) | Híbrido, 50% remoto | 60.000–75.000 € | Contrato indefinido | Vehículo propio imprescindible Desde Akuaro colaboramos con un gran grupo industrial europeo que está creando una nueva Oficina de Transformación Digital para llevar la ingeniería de datos y la inteligencia artificial directamente a sus operaciones. La compañía cuenta con un backlog de iniciativas de Data e IA relacionadas con producción, energía, materias primas, logística y eficiencia industrial. Algunos de sus primeros proyectos buscan mejorar procesos productivos críticos, donde pequeños incrementos de eficiencia pueden generar un impacto económico de millones de euros.
Buscamos a una persona que ayude a construir la plataforma que conectará las plantas industriales con Microsoft Azure y Databricks, creando la base necesaria para desarrollar productos de datos y desplegar modelos de Machine Learning e inteligencia artificial. Te incorporarás directamente a la plantilla de la compañía y formarás parte de un equipo interno de nueva creación. Durante los primeros meses trabajarás junto a un partner estratégico y tecnológico internacional de primer nivel, participando en la transferencia de conocimiento y asumiendo progresivamente el ownership de las soluciones desarrolladas.
Diseñar, construir y operar pipelines fiables y escalables que conecten los sistemas industriales de planta con la plataforma corporativa de datos. Los equipos de sistemas de planta —OT, Operational Technology— capturan las señales procedentes de sensores, PLC y MES, y las publican localmente en Kafka.
Tu responsabilidad se centrará principalmente desde Kafka hacia arriba: ingesta, persistencia, transformación, gobierno y explotación del dato en Azure y Databricks. ¿Diseñar y desarrollar pipelines de datos utilizando Python y SQL.
Ingerir información industrial desde Kafka hacia Azure y Databricks. Integrar información de planta con datos corporativos procedentes de SAP y otros sistemas. Gestionar grandes volúmenes, datos retrasados, duplicidades, reintentos e idempotencia.
Aplicar buenas prácticas de calidad, observabilidad, trazabilidad y monitorización. Trabajar con Apache Spark, Delta Lake y Databricks. Colaborar en el gobierno del dato mediante Unity Catalog y Microsoft Purview.
Participar en la automatización de infraestructura y despliegues con Terraform y Azure DevOps. Construir productos de datos reutilizables, mantenibles y documentados. Colaborar con Data Scientists en la puesta en producción y el reentrenamiento de modelos.
Trabajar con equipos de arquitectura, seguridad, sistemas y expertos industriales. ¿Experiencia sólida construyendo y manteniendo pipelines de datos en producción. Buen nivel de Python y SQL.
Experiencia con Spark, Databricks o plataformas Lakehouse equivalentes.
Conocimiento práctico de arquitecturas ETL/ELT y procesamiento de grandes volúmenes.
Experiencia con alguna plataforma cloud, preferentemente Microsoft Azure. Capacidad para colaborar con equipos técnicos, negocio y expertos industriales. Inglés profesional alto, hablado y escrito. Vehículo propio y disponibilidad para desplazarse regularmente a las instalaciones de la zona Martorell–Rubí.
Azure
Databricks, Spark Structured Streaming y Delta Lake. Kafka y otras tecnologías de streaming o mensajería como MQTT o MQ. Terraform, Azure DevOps y procesos de CI/CD.
Unity
Catalog o Microsoft Purview. Integraciones con SAP. Datos procedentes de sensores, IoT o series temporales. Sistemas industriales como MES, SCADA, historians o PLC. Integración entre sistemas industriales —OT— y plataformas corporativas —IT—.
Experiencia en automoción, química, energía, farma, alimentación, utilities o manufacturing. ¿Una plataforma de datos que se está construyendo y evolucionando. Colaboración con grandes profesionales y partners internacionales. Autonomía y capacidad real para proponer soluciones y buenas prácticas. Modelo híbrido con un 50% de teletrabajo, autogestionado según las necesidades del proyecto.
Horario de entrada adaptable entre las 8:00 y las 9:30. Jornada intensiva de verano. Acceso a formación. Retribución fija de entre 60.000 y 75.000 € brutos anuales, según experiencia.
Importante: Las instalaciones se encuentran en un polígono industrial de la zona Martorell–Rubí ( Vallés Occidental ). Por su ubicación y las conexiones disponibles, disponer actualmente de vehículo propio es un requisito necesario.
📌 Senior Engineer, Data Engineering (Barcelona)
🏢 Akuaro
📍 Barcelona