En E-Frontiers estamos buscando un/a Data Engineer para incorporarse a un equipo de datos y participar en el diseño, desarrollo y evolución de soluciones escalables en entornos cloud sobre AWS.
Responsabilidades
- Diseñar, desarrollar y mantener pipelines de datos escalables, tanto batch como streaming.
- Analizar e implementar soluciones avanzadas de procesamiento de datos en entornos cloud AWS.
- Traducir requerimientos complejos de negocio en arquitecturas técnicas eficientes, escalables y robustas.
- Garantizar la calidad, fiabilidad y disponibilidad del dato mediante la implementación de sistemas de observabilidad y Data Quality.
- Optimizar procesos y arquitecturas existentes para maximizar rendimiento y eficiencia de costes.
- Colaborar con equipos de Data, Producto y Negocio para impulsar la generación y explotación del dato.
- Diseñar e implementar estrategias de CI/CD orientadas a entornos de datos.
- Participar en la definición y evolución de arquitecturas modernas como Data Lakehouse y Data Mesh.
Conocimientos técnicos
- Experiencia sólida en programación con Python .
- Experiencia en procesamiento distribuido de datos con Apache Spark.
- Conocimientos en IA generativa aplicada al desarrollo.
- Modelado de datos avanzado en entornos SQL y NoSQL.
- Experiencia con bases de datos relacionales como PostgreSQL y/o MySQL.
- Experiencia con bases de datos NoSQL como MongoDB, Amazon DynamoDB o Amazon DocumentDB.
- Experiencia avanzada con servicios AWS como Amazon S3, AWS Lambda, Amazon API Gateway, Amazon EMR, AWS Glue y Amazon Athena.
- Dominio de patrones arquitectónicos como Data Lakehouse y Data Mesh en AWS.
- Experiencia en orquestación con Apache Airflow o AWS Step Functions.
- Control de versiones con Git y estrategias avanzadas de branching.
- Experiencia con contenedores mediante Docker y orquestación con Kubernetes / EKS.
- Infraestructura como Código (IaC) con Terraform.
Competencias
- Mentalidad analítica y orientación a la resolución de problema
📌 Data Engineer (España)
🏢 E-Frontiers
📍 España
Postulate a este anuncio
Muestra tus habilidades a la empresa, rellenar el formulario y deja un toque personal en la carta, ayudará el reclutador en la elección del candidato.