Responsabilidades principales
Diseñar y optimizar prompts, instrucciones de sistema, ejemplos y guardrails para aplicaciones basadas en LLMs.
Crear conjuntos de datos y criterios de evaluación para analizar la calidad de las respuestas en diferentes escenarios, idiomas y casos límite.
Realizar pruebas y experimentos para identificar errores, inconsistencias y oportunidades de mejora.
Colaborar con equipos de producto, especialistas de negocio e ingeniería para mejorar el rendimiento y la experiencia de usuario.
Documentar patrones de prompting, resultados de pruebas, limitaciones conocidas y recomendaciones de optimización.
Dar seguimiento al desempeño de los prompts y adaptarlos ante cambios en modelos, productos o necesidades de los usuarios.