Data Engineer GCP

Sobre el puesto

Stefanini Group busca un(a) Data Engineer GCP para sumarse a su equipo y participar en proyectos de transformación digital y analítica avanzada. Stefanini cuenta con más de 30.000 personas conectadas desde 41 países.

Responsabilidades

• Diseñar, desarrollar y mantener pipelines de datos ETL/ELT batch y event-driven.
• Implementar soluciones de procesamiento y almacenamiento sobre Google Cloud Platform (GCP), utilizando BigQuery, Cloud Storage, Dataflow, Dataproc y Pub/Sub.
• Desarrollar procesos con Python, SQL y Spark/PySpark.
• Implementar y mantener procesos de orquestación con Airflow / Cloud Composer.
• Participar en la construcción y evolución de arquitecturas Data Lake, Data Warehouse y Lakehouse.
• Diseñar y optimizar modelos de datos, automatizar procesos mediante CI/CD e Infrastructure as Code, y velar por la calidad, integridad, trazabilidad y disponibilidad de los datos.
• Colaborar con equipos de Arquitectura, Data Science, BI, Desarrollo y áreas de negocio.

Requisitos

• Experiencia en Google Cloud Platform (GCP).
• Dominio de BigQuery, Cloud Storage, Dataflow y/o Dataproc, Pub/Sub.
• Desarrollo con Python y SQL avanzado.
• Experiencia con Apache Spark / PySpark y construcción de pipelines ETL/ELT.
• Modelamiento y transformación de datos.
• Orquestación mediante Airflow / Cloud Composer.

Conocimientos deseables: DBT o Dataform, Terraform, Git y procesos CI/CD, Hadoop y/o Kafka, bases de datos relacionales y NoSQL, Vertex AI o proyectos de Machine Learning, gobierno y calidad de datos, y arquitecturas Data Lake, Data Warehouse y Lakehouse.

Datos clave

• El puesto participa en proyectos de transformación digital y analítica avanzada.
• Se requiere experiencia en Google Cloud Platform (GCP), Python, SQL avanzado y Apache Spark / PySpark.
• Se buscan conocimientos en pipelines ETL/ELT y orquestación con Airflow / Cloud Composer.