Qa Engineer Ia
La Unidad Corporativa de la Universidad Tecnológica del Perú, que forma parte del Grupo Intercorp y es parte del ranking de las mejores empresas para trabajar en el Perú según Great Place to Work*, se encuentra en búsqueda del mejor talento, para ocupar la posición de ?QA Engineer IA?, a continuación, los detalles:
¿A quiénes buscamos?
- Bachiller o Titulado en Ingeniería de Sistemas, Ingeniería de Software, Ciencias de la Computación o afines.
- Indispensable contar con más de 3 años en roles como QA Software, con experiencia práctica demostrable probando aplicaciones IA generativa, chatbots o sistemas basados en LLM.
- Indispensable contar con experiencia diseñando casos prueba, matrices de trazabilidad, datasets de prueba, pruebas negativas/de borde, gestión de defectos y reportes ejecutivos de calidad.
- Indispensable contar con experiencia definiendo y ejecutando evaluaciones reproducibles con golden datasets, rúbricas, umbrales y revisión humana.
- Indispensable contar con experiencia en automatización de pruebas (Playwright) y pruebas de APIs REST (Postman, y/o código) integradas a flujos de CI/CD.
- Experiencia deseable con canales WhatsApp/telefonía y plataformas como Five9, Genesys Cloud o equivalentes, con validación de transferencias y trazabilidad en CRM Dynamics.
- Experiencia deseable con frameworks de evaluación LLM/RAG (Ragas, DeepEval, promptfoo, LangSmith o equivalentes).
- Experiencia deseable con servicios cloud (AWS, Azure o Databricks) y herramientas de performance (k6, JMeter o Gatling).
- Deseable contar con Certificación ISTQB Foundation Level o formación equivalente en pruebas de software.
- Deseable contar con especialización o cursos en aseguramiento de la calidad (QA), testing de software o inteligencia artificial aplicada.
- Deseable contar con formación o certificación en herramientas de gestión de pruebas (Xray, Zephyr, TestRail) y en servicios cloud (AWS, Azure o Databricks).
¿Qué funciones realizarías?
- Definir la estrategia de QA por producto e iniciativa: riesgos, escenarios, criterios de entrada/salida, cobertura, datasets, evidencias y planes de regresión.
- Analizar historias de usuario, especificaciones, prompts, flujos agénticos y criterios de aceptación; identificar escenarios positivos, negativos, de límite y de excepción.
- Diseñar y ejecutar pruebas end-to-end de chat, voz, APIs, interfaces, herramientas del agente, handoff a humano e integraciones con plataformas externas.
- Validar soluciones RAG y bases de conocimiento: relevancia de recuperación, fidelidad a fuentes, vigencia, respuestas sin soporte, citas cuando apliquen y comportamiento ante información insuficiente.
- Evaluar agentes y LLM con conjuntos de preguntas de referencia (golden datasets), métricas y rúbricas: exactitud, completitud, groundedness, cumplimiento de instrucciones, tasa de resolución, escalamiento y consistencia.
- Probar escenarios de seguridad y privacidad de IA: prompt injection, jailbreak, exposición de datos, acceso no autorizado, uso indebido de herramientas, filtración entre sesiones y protección de datos personales.
- Ejecutar pruebas de integración y de contratos de APIs REST, autenticación/autorización, webhooks, payloads, errores, reintentos, timeouts e idempotencia donde aplique.
- Diseñar pruebas específicas de voz y canales conversacionales: ASR/transcripción, latencia, interrupciones, silencio, variaciones de lenguaje, contexto multivuelta y transferencia a asesor.
- Automatizar la regresión de flujos críticos con Playwright y pruebas de APIs; integrar su ejecución y reportes al pipeline CI/CD y controlar cambios de prompts, modelos y conocimiento.
- Ejecutar pruebas de rendimiento, concurrencia, resiliencia y costos/consumo cuando aplique; identificar umbrales, degradación y oportunidades de mejora.
¿En qué horario trabajarías?
- Lunes a viernes de 8:30 am a 6:30 pm. (Modalidad Híbrida)
¿Por qué unirte a la UTP?
- Atractivo salario: Reconocemos tu talento con una compensación por encima del mercado.
- Disfruta de todos los beneficios de ley que te corresponden por ingresar al corporativo, en planilla desde el primer día.
- Crecimiento profesional y capacitación constante: Desarrolla tu carrera en un entorno de aprendizaje continuo, con oportunidades de ascenso en UTP y Grupo Intercorp.
- Descuentos corporativos y educativos: Beneficios exclusivos Intercorp y descuentos en programas de postgrado y formación continua.
- Excelente clima laboral: Somos una empresa reconocida como Great Place To Work.
- Trabajar con un equipo altamente calificado dentro de una infraestructura moderna y equipada con la mejor tecnología.
?La UTP es una universidad inclusiva y libre de discriminación, que respeta la diversidad y autenticidad de cada uno de los colaboradores.?
¡Más diversos, mejores equipos!
*Según resultados GPTW 2026.