Buscamos un Senior Data Engineerpara participar en un proyecto de nuestro área de Data con experiencia en mantenimiento, optimización, integración , gestión del ciclo de vida y calidad del dato basado en cloud.
¿Que buscamos?
Buscamos un Data Engineer Senior con experiencia en construcción de pipelines, diseño, desarrollo y optimización de datos complejos basado en cloud AWS, Azure y/o GCP.
Responsabilidades
- Diseño e implementación de pipelines de datos: Crear y estructurar procesos para la ingestión, procesamiento y transformación de datos.
- Recolección y almacenamiento de datos: Implementar soluciones para la captura y almacenamiento eficiente de datos provenientes de diversas fuentes.
- Limpieza y preprocesamiento de datos: Asegurar que los datos estén limpios y listos para su análisis, aplicando técnicas de limpieza y transformación.
- Optimización de bases de datos: Ajustar bases de datos para mejorar su rendimiento y escalabilidad.
- Integración de datos:
Facilitar la correcta integración de datos provenientes de distintas fuentes.
- Mantenimiento de sistemas de datos: Asegurar el funcionamiento continuo y productivo de los sistemas de datos.
- Monitorización y ajuste de flujos de datos: Supervisar y ajustar los pipelines y flujos de datos para mantener su rendimiento y confiabilidad.
- Calidad del dato: Implementar y mantener prácticas para asegurar la precisión, consistencia y fiabilidad de los datos.
- Gestión del ciclo de vida del dato: Gestionar el ciclo de vida de los datos desde su creación hasta su eventual archivado y eliminación.
- Orquestación de pipelines de datos: Implementar y gestionar herramientas de orquestación de flujos de trabajo como Apache Airflow, AWS Step Functions, o Google Cloud Composer para asegurar la automatización y eficiencia de los pipelines de datos.
- Ingesta de datos Batch y/o Streaming: Desarrollar e implementar procesos de ingestión de datos en lotes y en tiempo real utilizando herra
📌 Cloud Data Engineer Senior (España)
🏢 Paradigma Digital
📍 España
Postulate a este anuncio
Muestra tus habilidades a la empresa, rellenar el formulario y deja un toque personal en la carta, ayudará el reclutador en la elección del candidato.