? Senior Data Engineer III | Python · Spark · AWS · Apache Iceberg
? Localización: Málaga
? Modalidad: Teletrabajo
? Experiencia: +10 años | Senior Manager L6 / P4 Expert
? Inglés: B2 alto
? Proyecto: Integración de plataformas
¿Tienes una sólida trayectoria en Data Engineering y experiencia trabajando con plataformas capaces de procesar terabytes de información al día ?
Buscamos incorporar un/a Senior Data Engineer III con un fuerte background técnico en Python, Apache Spark, Airflow y AWS , acostumbrado/a a desarrollar arquitecturas y pipelines de datos a gran escala.
? Tu misión
Participarás como perfil experto en un proyecto de integración y evolución de plataformas de datos , trabajando sobre arquitecturas preparadas para procesar grandes volúmenes de información, del orden de terabytes diarios .
Tendrás un papel relevante en la construcción, optimización y evolución de pipelines , el diseño de modelos de datos y el desarrollo de soluciones dentro del ecosistema AWS, con especial presencia de Apache Spark y Apache Iceberg .
? Principales funciones
? Diseño y desarrollo de pipelines de procesamiento de datos a gran escala.
? Implementación y optimización de procesos de Data Engineering utilizando Python y Apache Spark .
? Orquestación y automatización de pipelines mediante Apache Airflow .
? Procesamiento y explotación de datasets de gran volumen, incluyendo entornos con terabytes de información procesados diariamente .
? Diseño y evolución de arquitecturas de datos desplegadas sobre AWS .
? Implementación y evolución de soluciones Data Lake / Lakehouse utilizando Apache Iceberg .
? Definición y optimización de modelos de datos aplicando metodologías de modelado dimensional como Kimball .
? Integración y modernización de diferentes plataformas y procesos de datos.
? Identificación y resolución de problemas de rendimiento, escalabilidad y procesamiento.
? Optimización de procesos distribuidos y pipelines críticos de datos.
? Coordinación e interlocución con equipos técnicos internacionales.
? Posible coordinación y gestión de equipos o perfiles técnicos dentro del proyecto.
✅ Requisitos imprescindibles
✔️ +12 años de experiencia profesional en Data Engineering o posiciones equivalentes.
✔️ Amplia experiencia trabajando con arquitecturas de procesamiento masivo de datos .
✔️ Dominio avanzado de:
? Python
⚡ Apache Spark
⚙️ Apache Airflow
☁️ AWS
? Apache Iceberg
✔️ Experiencia trabajando con datasets de gran escala , llegando a procesar terabytes de información al día .
✔️ Experiencia sólida en Data Modeling .
✔️ Conocimiento de metodologías de modelado dimensional , especialmente Kimball .
✔️ Experiencia diseñando,
desarrollando y optimizando Data Pipelines .
✔️ Capacidad para desenvolverse con autonomía en posiciones de elevada responsabilidad técnica.
✔️ Inglés B2 alto , con capacidad para mantener conversaciones, reuniones técnicas e interlocución habitual con el resto del equipo.
?️ Tecnologías fundamental
? Python
⚡ Apache Spark
⚙️ Apache Airflow
☁️ AWS
? Apache Iceberg
?️ Data Lakes / Lakehouse
? Data Pipelines / ETL / ELT
? Data Modeling / Kimball
? Large-scale Data Processing
⭐ Se valorará especialmente
➕ Experiencia trabajando en plataformas de datos de gran escala .
➕ Experiencia en proyectos de integración y modernización de plataformas .
➕ Experiencia optimizando procesos distribuidos con Apache Spark .
➕ Experiencia en arquitecturas Data Lake o Lakehouse sobre AWS .
➕ Experiencia con Apache Iceberg en entornos productivos.
➕ Experiencia en optimización de rendimiento y procesamiento masivo de información .
➕ Experiencia previa como Technical Lead, referente técnico o responsable de equipos de Data Engineering .
? Horario
❄️ Horario de invierno
- Lunes a jueves: 09:00 - 19:00 h
- Viernes: 08:00 - 14:30 h
☀️ Horario de verano | 01/07 al 15/09
- Lunes a jueves: 08:00 - 15:00 h
- Viernes: 08:00 - 14:30 h
? ¿Te interesa? Si cuentas con una trayectoria sólida en Data Engineering , dominas Python, Spark y AWS y tienes experiencia diseñando soluciones capaces de procesar terabytes de información al día , queremos conocerte.
📌 Senior Data Engineer III | Python · Spark · AWS · Apache Iceberg (España)
🏢 Krimda
📍 España