01 nov
|
Grupo TECDATA Engineering
|
Madrid
01 nov
Grupo TECDATA Engineering
Madrid
Buscamos Senior Data Engineer – Big Data & Cloud ¿Tienes experiencia en arquitecturas Big Data, Apache Spark y Cloudera? ¿Te interesa asumir un papel de referencia técnica, combinando arquitectura y desarrollo en entornos híbridos y Cloud? Esta oportunidad puede interesarte Buscamos Senior Data Engineer – Big Data & Cloud ¿Tienes experiencia en arquitecturas Big Data, Apache Spark y Cloudera? ¿Te interesa asumir un papel de referencia técnica, combinando arquitectura y desarrollo en entornos híbridos y Cloud? Esta ocasión puede interesarte Principales responsabilidades Diseñar y evolucionar arquitecturas de datos batch y real time sobre Cloudera y Google Cloud Platform (GCP). Desarrollar y mantener procesos de ingesta, almacenamiento y transformación de datos con Spark, Scala, BigQuery, dbt, SQL y Python. Trabajar con arquitecturas de datos, gobierno del dato y optimización de procesos productivos. Participar en la planificación del backlog, estimaciones técnicas y coordinación con el Product Owner. Colaborar con el cliente, los equipos de IT y negocio, y participar en demos. Resolver incidencias de producción y supervisar procesos mediante Control-M. Asegurar las buenas prácticas técnicas y orientar al resto del equipo.
Requisitos imprescindibles Big Data Más de 3 años de experiencia diseñando y desarrollando procesos batch y real time con Apache Spark en el ecosistema Cloudera. Alto nivel de Scala sobre Spark y conocimientos de Java. Experiencia con HDFS, Hive, Kudu y Solr. Conocimiento profundo de Apache Kafka, tanto a nivel de arquitectura como de desarrollo. Cloud – Google Cloud Platform Experiencia con GCP y BigQuery. Conocimientos de dbt, SQL y Python. Experiencia con Pub/Sub, Dataflow, Cloud Functions y Cloud Storage. Otros requisitos Experiencia con Git/Bitbucket, Jenkins y CI/CD. Planificación de procesos con Control-M. Experiencia trabajando con metodologías Scrum. Autonomía, capacidad de decisión y buenas habilidades de comunicación. Se valorará Experiencia en arquitecturas híbridas on-premise y Cloud. Conocimientos de Data Fusion, Cloud Bigtable y GKE. Experiencia en el sector retail. Participación en la toma de requisitos y análisis funcional en proyectos Big Data/BI. ¿Qué encontrarás? Un proyecto de consultoría y desarrollo para un cliente del sector retail, en el que podrás asumir un papel clave en la arquitectura, evolución y desarrollo de la plataforma de datos. ¿Encaja con tu experiencia?
📌 Data Engineer – Big Data (Madrid)
🏢 Grupo TECDATA Engineering
📍 Madrid