15 ago
|
Ad4 Octogono
|
España
15 ago
Ad4 Octogono
España
En AD4 Octogono estamos contratando.
Buscamos un/a Data Engineer especializado/a en Azure Databricks para participar en el diseño, desarrollo y evolución de soluciones de ingeniería del dato sobre arquitecturas Lakehouse.
Descripción del puesto
Buscamos un/a cualificado con al menos 3 años de experiencia en proyectos de ingeniería del dato y 2 años trabajando con Databricks en entornos productivos , con experiencia en procesamiento distribuido, arquitecturas Lakehouse y desarrollo de pipelines de datos.
La persona seleccionada participará en el diseño y construcción de procesos batch y streaming, trabajando con Spark, PySpark, SQL y Delta Lake, así como en la optimización y evolución de plataformas de datos.
Titulación
- Titulación universitaria o formación equivalente en:
- Ingeniería Informática.
- Ingeniería de Telecomunicaciones.
- Matemáticas.
- Estadística.
- Disciplinas relacionadas.
Experiencia y certificación
- Mínimo 3 años de experiencia en proyectos de ingeniería del dato .
- Mínimo 2 años de experiencia con Databricks en entornos productivos .
- Databricks Certified Data Engineer Professional, imprescindible.
Conocimientos técnicos imprescindibles
- Apache Spark y PySpark .
- Databricks Data Intelligence Platform .
- Delta Lake y Delta Tables .
- Databricks SQL.
- Delta Live Tables / Lakeflow Declarative Pipelines .
- Databricks Asset Bundles.
- Optimización mediante:
- Particionamiento.
- Z-Ordering.
- Liquid Clustering.
- Caching.
- File Compaction.
- Amazon Web Services y Databricks on AWS.
- Azure Data Lake Storage.
- Azure Data Factory.
- Microsoft Fabric.
- Azure Key Vault.
- Azure DevOps.
- Procesamiento batch y streaming.
- Arquitecturas Lakehouse.
- Arquitecturas Medallion: Bronze, Silver y Gold.
Conocimientos deseables
- Migración de plataformas ETL tradicionales a Databricks.
- Integración con Kafka o plataformas de streaming equivalentes.
- Experiencia con dbt .
- Apache Airflow.
- Azure Data Factory u otras herramientas de orquestación.
📌 Azure Databricks Data Engineer (España)
🏢 Ad4 Octogono
📍 España