Automation Tester IA

Reclutador: David Reyes Posición: Automation Tester IAUbicación: CDMXIndustria: InsuranceModalidad de trabajo: Remoto
Tus funciones:Tester de Automatización altamente capacitado para asegurar la calidad de aplicaciones y soluciones basadas en Inteligencia Artificial (IA), Machine Learning (ML) e IA Generativa. Será responsable de diseñar, desarrollar y ejecutar estrategias de pruebas automatizadas que garanticen la funcionalidad, confiabilidad, rendimiento y calidad de modelos de IA y aplicaciones inteligentes.El candidato ideal deberá contar con experiencia en pruebas de software tradicionales, así como conocimientos en validación de modelos de IA, pruebas de aplicaciones basadas en Large Language Models (LLMs), chatbots, asistentes virtuales y soluciones de IA GenerativAutomatización de PruebasDiseñar, desarrollar y mantener frameworks de automatización de pruebas.Crear y ejecutar pruebas funcionales, de integración, regresión, API y end-to-end.Automatizar pruebas para aplicaciones web, móviles y soluciones empresariales.Integrar pruebas automatizadas dentro de pipelines CI/CD.Monitorear y mejorar la cobertura de pruebas automatizadas.Pruebas de Inteligencia ArtificialValidar modelos de Machine Learning y soluciones de IA Generativa.Diseñar casos de prueba para evaluar precisión, consistencia y relevancia de respuestas generadas por IA.Ejecutar pruebas de prompts y regresión de prompts.Identificar y documentar alucinaciones, sesgos, respuestas inconsistentes y comportamientos inesperados.Validar soluciones basadas en LLMs, RAG (Retrieval Augmented Generation), agentes inteligentes y chatbots.Evaluar la calidad de datos utilizados para entrenamiento e inferencia.Apoyar en la validación de modelos antes de su liberación a producción.Aseguramiento de CalidadElaborar planes de prueba, casos de prueba y reportes de ejecución.Gestionar defectos durante todo el ciclo de vida del desarrollo.Participar en revisiones de requerimientos y diseño funcional.Colaborar con equipos de desarrollo, científicos de datos, MLOps, Product Owners y analistas de negocio.Garantizar el cumplimiento de estándares y mejores prácticas de calidad.Pruebas de Rendimiento y SeguridadEjecutar pruebas de rendimiento sobre aplicaciones y APIs.Validar tiempos de respuesta, escalabilidad y estabilidad de soluciones basadas en IA.Colaborar en actividades de pruebas de seguridad y vulnerabilidades.
Conocimientos y experiencia necesaria: Licenciatura o Ingeniería en Sistemas, Informática, Computación, Tecnologías de la Información o afín.ExperienciaMás de 3 años de experiencia en pruebas de software y automatización.Mínimo 2 años participando en proyectos de Inteligencia Artificial, Machine Learning o IA Generativa.Experiencia trabajando bajo metodologías ágiles (Scrum, Kanban).Conocimientos TécnicosAutomatización y QASeleniumPlaywrightCypressRobot FrameworkAppiumPostmanRest AssuredSwagger/OpenAPILenguajes de ProgramaciónPythonJavaJavaScript / TypeScriptDevOps y Control de VersionesAzure DevOpsGitHub ActionsJenkinsGitInteligencia ArtificialComprensión del ciclo de vida de Machine Learning.Experiencia validando:Modelos de Machine LearningLLMs (Large Language Models)ChatbotsCopilotsSoluciones RAGIA GenerativaAgentes de IAMétricas de Evaluación de IAExactitud (Accuracy)Precisión (Precision)RecallF1 ScoreRelevancia de respuestasDetección de alucinacionesEvaluación de consistencia de respuestasPlataformas CloudMicrosoft Azure (preferente)AWSGoogle Cloud PlatformCompetencias DeseablesCertificación ISTQB.Conocimientos de MLOps.Experiencia con Azure OpenAI Service.Experiencia con Azure AI Foundry, Azure Machine Learning o Databricks.Conocimientos de Responsible AI, Explainable AI y Fairness.Experiencia utilizando herramientas de evaluación de IA como:PromptfooDeepEvalOpenAI EvalsLangSmithHabilidades BlandasPensamiento analítico y orientación a resultados.Atención al detalle.Capacidad para resolver problemas complejos.Excelente comunicación oral y escrita.Trabajo colaborativo con equipos multidisciplinarios.Proactividad y aprendizaje continuo.Adaptabilidad a tecnologías emergentes.Indicadores de ÉxitoIncremento de la cobertura de automatización.Reducción de defectos en producción.Mejora en la calidad y confiabilidad de soluciones de IA.Reducción del tiempo de ejecución de pruebas.Cumplimiento de métricas de calidad establecidas para los modelos de IA.Identificación temprana de riesgos, sesgos y comportamientos inesperados en aplicaciones inteligentes.Modalidad RecomendadaHíbrida o Remota.Nivel: Semi Senior / Senior.Inglés intermedio-avanzado (deseable para proyectos globales).Perfil ideal: Profesional de QA Automation con sólidos conocimientos técnicos y experiencia en validación de soluciones de Inteligencia Artificial, capaz de garantizar la calidad de aplicaciones innovadoras basadas en IA Generativa y Machine Learning dentro de entornos empresariales.
Habilidades: Trabajo bajo presión, calidad en el trabajo y orientado a resultados
Tu carrera en Capgemini Al trabajar en un ambiente de equipo, nuestros consultores se enfocan en el análisis, diseño y desarrollo de soluciones basadas en tecnología para los clientes de Capgemini.Trabajarás en conjunto con especialistas funcionales, técnicos y del negocio para ayudar a desarrollar la implementación e integración de soluciones y sistemas innovadores incluyendo metodologías, técnicas y herramientas.Contribuirás de una manera responsable y oportuna con la satisfacción del cliente proporcionando servicios y productos que generan valor agregado.Capgemini ofrece una compensación competitiva y beneficios superiores a los de Ley.Nuestras oficinas centrales están en París, Francia y tenemos presencia en más de 50 países. Somos más de 340 mil profesionales en México, ubicados en Ciudad de México, Aguascalientes y Monterrey.Capgemini ha desarrollado metodologías propias a nivel global: Collaborative Business Experience y Rightshore.
Te encantará trabajar en Capgemini porque:Ofrecemos una experiencia única de reclutamiento y onboarding, y te ayudamos a construir las bases de tu carrera y habilidades profesionales.Proveemos un ambiente de trabajo colaborativo basado en nuestros 7 valores: Honestidad, Audacia, Confianza, Libertad, Espíritu de Equipo, Modestia y Diversión.Promovemos un ambiente que te permite planear y desarrollar tu carrera.
“En Capgemini México, el objetivo es atraer al mejor talento y lograr un ambiente laboral diverso e inclusivo por lo que no se discrimina por motivo de raza, sexo, orientación sexual, identidad o expresión de género o cualquier otra característica propia de la persona. Todas las solicitudes son bienvenidas y serán consideradas para concurso con base en el mérito del candidato contra el trabajo y/o la experiencia para el puesto. Por motivos de validación, usaremos de manera segura tus datos incluyendo pero no limitado a tu imagen en video o screenshots durante los procesos de selección, contratación y/o On boarding , para tu seguridad, puedes revisar nuestro aviso de privacidad en: https://www.capgemini.com/mx-es/aviso-de-privacidad-para-candidatos-a-ocupar-una-vacante/