07 oct
|
TECDATA ENGINEERING
|
Madrid
07 oct
TECDATA ENGINEERING
Madrid
Data Engineer | Python + SQL + PostgreSQL
Sobre el proyecto
Buscamos un/a Data Engineer con experiencia sólida en Python, SQL y PostgreSQL para incorporarse a un proyecto con un fuerte enfoque en tecnologías Open Source.
Buscamos un perfil hands-on, acostumbrado a desarrollar soluciones de datos desde cero mediante código. En este proyecto no se trabaja con herramientas ETL visuales ni soluciones de tipo drag & drop: el trabajo se realiza directamente mediante scripts Python y SQL avanzado.
El cliente utiliza StarRocks como motor analítico de alto rendimiento, por lo que buscamos profesionales con una base sólida en bases de datos relacionales, Data Warehousing y optimización SQL, con capacidad para adaptarse rápidamente a nuevas tecnologías.
Responsabilidades
- Desarrollo de procesos de ingesta y transformación de datos mediante Python y SQL.
- Creación de scripts desde cero para procesamiento de datos y archivos.
- Diseño y desarrollo de procesos ETL / ELT completamente orientados a código.
- Gestión de cargas incrementales y cargas completas.
- Implementación de mecanismos robustos de control de errores y recuperación ante fallos.
- Desarrollo de controles de calidad de datos mediante código.
- Optimización de consultas y procesos sobre grandes volúmenes de información.
- Diseño, creación y optimización de índices en PostgreSQL.
- Análisis de planes de ejecución mediante EXPLAIN.
- Identificación y resolución de problemas de rendimiento.
- Trabajo con estructuras de datos y optimización del consumo de memoria durante los procesos de ingesta.
- Automatización y mantenimiento de procesos de datos.
- Colaboración en el diseño y evolución de soluciones analíticas.
Requisitos imprescindibles
Python
- Experiencia sólida desarrollando scripts Python desde cero.
- Experiencia en tratamiento e ingesta de datos.
- Gestión optimizado de archivos, especialmente grandes volúmenes de información.
- Conocimientos sobre gestión de memoria y uso adecuado de estructuras de datos
📌 Data Engineer | Python + SQL + PostgreSQL (Madrid)
🏢 TECDATA ENGINEERING
📍 Madrid