Copilot Tester

Resumen del puesto

El Copilot Tester es responsable de validar la calidad, precisión y efectividad de copilots desarrollados con Microsoft Copilot Studio, asegurando que las interacciones conversacionales, flujos automatizados e integraciones funcionen correctamente y entreguen valor al usuario final.

Este rol combina aseguramiento de calidad funcional, validación de experiencias conversacionales y entendimiento de procesos de negocio. Actúa como garante de la confiabilidad, seguridad y usabilidad de los copilots, colaborando estrechamente con Copilot Developers, Power Platform Developers y stakeholders para asegurar soluciones robustas y alineadas a los objetivos organizacionales.

Responsabilidades principales

• Diseñar y ejecutar planes de prueba para copilots desarrollados en Copilot Studio.

• Validar flujos conversacionales, topics, prompts y respuestas generativas.

• Ejecutar pruebas funcionales, de regresión, smoke testing y pruebas de aceptación de usuario (UAT).

• Verificar integraciones con Power Automate, Dataverse, Power Apps y sistemas externos.

• Evaluar manejo de errores, respuestas inesperadas y escenarios límite (edge cases).

• Validar controles de seguridad, autenticación y permisos en entornos conversacionales.

• Documentar defectos, inconsistencias y oportunidades de mejora en herramientas de gestión.

• Colaborar con desarrolladores en la reproducción y resolución de incidencias.

• Medir calidad de la experiencia conversacional: coherencia, relevancia, tono y claridad.

• Participar en la definición de criterios de aceptación y estándares de calidad para copilots.

• Generar reportes de calidad y resultados de pruebas para toma de decisiones.

Requisitos

• Experiencia mínima de 2–3 años en QA funcional de soluciones digitales o automatización.

• Experiencia probando chatbots, asistentes virtuales o soluciones conversacionales.

• Familiaridad con Copilot Studio o plataformas similares de bots conversacionales.

• Conocimientos en Power Platform, especialmente Power Automate y conceptos de Dataverse.

• Experiencia en diseño y ejecución de casos de prueba funcionales, regresión y UAT.

• Manejo de herramientas de gestión de pruebas y defectos: Jira, Azure DevOps, TestRail, Zephyr, Xray.

• Capacidad para validar integraciones vía APIs y flujos automatizados.

• Atención al detalle, pensamiento crítico y orientación a la experiencia del usuario.

• Habilidades de comunicación clara y documentación efectiva.

• Experiencia trabajando en entornos ágiles.