Big Data Engineer | Spark, Scala & Data Lake | 100% Remoto
Buscamos un/a Big Data Engineer para incorporarse a un proyecto tecnológico en el sector financiero, especializado en el desarrollo y mantenimiento de plataformas de datos y arquitecturas Data Lake.
Formarás parte de un equipo multidisciplinar en el que trabajarás con grandes volúmenes de información, desarrollando pipelines de datos y optimizando procesos de ingesta, transformación y validación. Participarás en iniciativas relacionadas con el riesgo de mercado, contribuyendo a garantizar la calidad, fiabilidad y disponibilidad de los datos en entornos productivos.
Buscamos una persona con sólidos conocimientos técnicos, capacidad analítica, autonomía y buenas habilidades de comunicación, que disfrute trabajando en equipo y proponiendo mejoras continuas.
¿Diseñar, desarrollar y mantener pipelines de datos utilizando Apache Spark, Scala y SQL.
Implementar procesos de ingesta, transformación, validación y publicación de datos.
Trabajar con arquitecturas Data Lake y plataformas de datos en la nube.
Orquestar procesos batch, dependencias y flujos de trabajo mediante herramientas como Control-M y Apache Airflow.
Optimizar el rendimiento, la escalabilidad y la fiabilidad de las cargas de trabajo basadas en Spark.
Garantizar la calidad, el linaje y la trazabilidad de los datos a lo largo de todo el ciclo de procesamiento.
Trabajar conjuntamente con equipos ágiles, funcionales y de soporte a producción para asegurar la correcta entrega de las soluciones.
¿Más de 2 años de experiencia en Big Data, Data Lake o plataformas de datos en la nube.
Experiencia práctica sólida con Apache Spark, Scala y SQL para el procesamiento de grandes volúmenes de información.
Conocimientos de arquitectura Data Lake y desarrollo de pipelines de datos en entornos productivos.
Experiencia o conocimientos en controles de calidad, linaje y trazabilidad de datos.
Buenas habilidades de comunicación, trabajo en equipo y adaptación a entornos
📌 Big Data Engineer (España)
🏢 Zemsania
📍 España
Postulate a este anuncio
Muestra tus habilidades a la empresa, rellenar el formulario y deja un toque personal en la carta, ayudará el reclutador en la elección del candidato.