Senior Software Engineer

Sobre el puesto

Como Senior Software Engineer - Evals Platform en Mercado Libre, diseñarás y escalarás sistemas innovadores y seguros que resuelven problemas reales y de alto impacto. Trabajarás con tecnología de vanguardia, modelos de IA propios y buenas prácticas de ingeniería, en un entorno dinámico y de aprendizaje continuo.

El propósito es democratizar el comercio electrónico y los servicios financieros en América Latina.

Responsabilidades

• Construir y mantener el pipeline de evaluación continua, recolectando conversaciones de producción para evaluarlas de forma programada con rúbricas configurables.
• Desarrollar la plataforma para auditar agentes y sus assets durante todo su ciclo de vida.
• Integrar la plataforma en la mejora continua para retroalimentar la selección de modelos y el ajuste de prompts.
• Diseñar estrategias de evaluación y rúbricas para agentes conversacionales complejos en entornos de alta disponibilidad.
• Colaborar con equipos de productos para convertir casos de uso en criterios de evaluación medibles.

Requisitos

• Conocimientos sólidos de Python o Go y diseño de APIs RESTful.
• Familiaridad con arquitecturas de microservicios, sistemas distribuidos y procesamiento asíncrono.
• Conocimientos de bases de datos relacionales como MySQL.
• Familiaridad con LLMs, sus APIs y frameworks de evaluación como LLM-as-judge.
• Curiosidad y autonomía para investigar y resolver problemas, y capacidad para trabajar en equipo.

Cómo postularte

Postúlate directamente en CazVid.

Datos clave

• La ubicación indicada es Buenos Aires, Argentina.
• El puesto requiere conocimientos de Python o Go y diseño de APIs RESTful.
• Se requiere familiaridad con LLMs, sus APIs y frameworks de evaluación.