Ingeniero de Datos - Temporal
Aviso de fuente externaen Zigi App
Zigi App busca un Ingeniero de Datos temporal para modernizar pipelines, optimizar costos y desarrollar soluciones con Databricks y Apache Spark.
Salario
No especificado
Ubicación
Guatemala City, Guatemala
Tipo de empleo
Tiempo completo
Modalidad
No especificado
Ingeniero de Datos - Temporal
Guatemala City, Guatemala
Descripción del empleo
Sobre el puesto
Zigi App busca un Ingeniero de Datos (Temporal) para modernizar su infraestructura actual, mitigar la deuda técnica, optimizar costos operativos e implementar características avanzadas de Databricks bajo estándares de desarrollo y aseguramiento de calidad.
El equipo reúne diferentes áreas de expertise y grados de experiencia, y trabaja para mejorar los procesos y la experiencia de sus productos y usuarios.
Responsabilidades
- Auditar, refactorizar y limpiar pipelines de datos para mejorar el rendimiento y reducir costos de cómputo en la nube.
- Diseñar e implementar soluciones con características de Databricks, como Unity Catalog, Delta Live Tables, Liquid Clustering y Computación Serverless.
- Aplicar prácticas de ingeniería de software para datos, incluyendo control de versiones con Databricks Git Folders, modularización de código y revisión por pares mediante Pull Requests.
- Diseñar y desplegar pipelines de integración y despliegue continuo con Databricks Asset Bundles (DABs) o herramientas similares.
- Crear pruebas unitarias automatizadas y validaciones de calidad de datos para asegurar la confiabilidad de la información en la arquitectura Medallion.
Requisitos
- Mínimo 3 años de experiencia comprobable con Databricks y Apache Spark (PySpark / Spark SQL).
- Dominio de Delta Lake, incluyendo transacciones ACID, optimización y control de versiones de datos.
- Experiencia aplicando prácticas de DevOps/DataOps a entornos de datos, con Git, CI/CD y pruebas unitarias con pytest o similar.
- Entendimiento de modelado relacional, dimensional (Star Schema) y arquitectura Medallion.
- Experiencia trabajando con AWS.
Cómo postularte
Postúlate directamente en CazVid.
Datos clave
- La posición es de Ingeniero de Datos temporal.
- Se requiere experiencia con Databricks y Apache Spark (PySpark / Spark SQL).
- Se requiere experiencia trabajando con AWS.
- Postúlate directamente en CazVid.
Preguntas frecuentes
¿Qué implica el puesto?
Incluye modernizar la infraestructura, optimizar pipelines y costos, e implementar características de Databricks.
¿Qué experiencia y conocimientos se requieren?
Se requiere experiencia con Databricks y Apache Spark, Delta Lake, prácticas de DevOps/DataOps, modelado de datos, arquitectura Medallion y AWS.
¿Cómo puedo postularme?
Postúlate directamente en CazVid.