Data Engineer

En Rappi buscamos un Senior Data Engineer para liderar el diseño, construcción y optimización de nuestras plataformas de datos a gran escala en un entorno 100% cloud. Esta persona será clave en la creación de pipelines de procesamiento en tiempo real (streaming) y batch, la evolución de nuestra arquitectura de Data Lake/Data Lakehouse y la optimización de costos de infraestructura, asegurando la disponibilidad y calidad del dato para toda la organización.Trabajarás de forma autónoma en un equipo distribuido globalmente, con un impacto directo en la toma de decisiones estratégicas y en productos críticos de negocio impulsados por datos e inteligencia artificial.
Responsabilidades
Liderar el diseño, desarrollo e implementación de pipelines de datos (ETL/ELT) robustos, altamente escalables y tolerantes a fallos (batch y streaming).Garantizar la confiabilidad, consistencia, gobernanza y observabilidad de los datos en producción a lo largo de toda la organización.Optimizar de forma proactiva el rendimiento de consultas y los costos de procesamiento y almacenamiento en la nube (AWS/GCP), generando un impacto financiero directo.Colaborar de cerca con equipos de Data Science, Analytics y Producto para estructurar datos complejos y habilitar casos de uso analíticos y modelos de Machine Learning/IA.Implementar prácticas de DataOps, incluyendo la automatización de pruebas de calidad de datos, monitoreo de pipelines y despliegues mediante CI/CD.Evolucionar la arquitectura de datos de Rappi hacia paradigmas modernos de gestión y almacenamiento (como Data Mesh o Lakehouse).Documentar arquitecturas, flujos de datos y mejores prácticas para elevar el estándar técnico del equipo de ingeniería.Mentorear a ingenieros de datos del equipo y participar en la resolución de problemas críticos de rendimiento y producción.
Requisitos técnicos
5+ años de experiencia en ingeniería de datos, desarrollo de software o posiciones enfocadas en procesamiento de datos a gran escala.Dominio sólido de lenguajes de programación orientados a datos, con una base muy fuerte en Python, Scala o Java.Experiencia avanzada con frameworks de procesamiento distribuido (como Apache Spark, Flink o Beam).Experiencia comprobable en el diseño y optimización de plataformas de datos modernas (Databricks, Snowflake, BigQuery o Delta Lake).Excelente dominio de SQL avanzado y principios de modelado de datos (dimensional, Data Vault o similares).Manejo de orquestadores de flujos de trabajo de datos como Airflow, Dagster o Prefect.Familiaridad con bases de datos relacionales, NoSQL y almacenamiento de objetos en la nube (AWS S3 o GCP Cloud Storage).
Valoramos adicionalmente (Nice to have)
Experiencia real implementando arquitecturas de streaming y mensajería en tiempo real (Apache Kafka, Kinesis o Pulsar).Conocimiento de Infraestructura como Código (IaC) utilizando Terraform.Experiencia implementando dbt (data build tool) para transformación y pruebas de calidad de datos.Familiaridad con la integración de bases de datos vectoriales (Pinecone, pgvector, Weaviate) para dar soporte a sistemas de IA y RAG.Certificaciones cloud (AWS, GCP) o certificaciones específicas de tecnologías de datos (Databricks, Snowflake).
Lo que buscamos en la persona

Capacidad para resolver problemas técnicos complejos de escalabilidad y rendimiento bajo presión en entornos de alta transaccionalidad.Comunicación clara y efectiva con audiencias tanto técnicas como de negocio, en formato síncrono y asíncrono (escrito).Foco obsesivo en la eficiencia, optimización de costos de infraestructura y en garantizar la calidad del dato.Autonomía y responsabilidad para liderar iniciativas de inicio a fin en entornos de trabajo 100% remotos y distribuidos.
Tipo Empleador: Regular
Empleador: Rappi Technology ColombiaPara más información consulta nuestra pagina web https://about.rappi.com/es y revisa nuestras reseñas en Glassdoor https://acortar.link/Eqm07Q
¡Te esperamos con mucha ansiedad y brillo en los ojos para entregar magia juntos! #Rappi 🧡